自Sora引领AI视频时代以来,国内外各大技术公司纷纷投身这一新兴领域的竞争。面对更加交互、沉浸的视频新时代,如何有效应对成本、质量和性能方面的挑战成为关键。
在最近的视频云技术大会上,火山引擎联合英特尔共同发布了创新的大模型训练视频预处理方案。据《每日经济新闻》报道,这一技术方案已经应用于豆包视频生成模型。
在发布会上,Bytedance Research的负责人李航介绍了豆包视频生成模型PixelDance是如何利用火山引擎的大模型训练视频预处理方案来充分利用大量潮汐资源,为模型训练提供有力支持的。
此外,抖音集团视频架构负责人王悦透露了字节自研视频编解码芯片的最新进展。该芯片经过抖音集团内部的实践验证,在同等视频压缩效率下,成本节省了95%以上。王悦还深入解释了面临的技术挑战和痛点:“首先是大规模视频训练数据集带来的计算和处理成本飙升。其次是视频样本数据质量不均,还有处理链路环节多且工程复杂等问题。”
火山引擎在解决这些问题方面做出了显著的努力。他们发布的自研多媒体处理框架和大模型训练视频预处理方案旨在解决视频大模型训练的成本、质量和性能技术挑战。预处理过程确保了视频数据格式的标准化、数据质量的提升以及标注信息的处理,从而提高了模型的学习效率和效果。
针对算力成本的问题,一位国内视频生成模型的算法工程师在接受《每日经济新闻》采访时表示,视频模型训练需要更多的算力,高质量的数据也更为稀缺。计算机科学家Matthias Plappert的研究也证实了这一点,Sora的训练对算力规模需求巨大。为了降低成本,火山引擎利用Intel的CPU等资源对方案进行了优化,并通过算法和工程的调整实现对海量视频数据的高质量预处理,提高了模型训练的效率。
除了上述方案,火山引擎还发布了跨语言同声复刻直播方案、多模态视频理解与生成方案等,从生产端到消费端全链路融入AI能力。整个AI领域正在经历一次革命性的变革,将人们从高清数据世界带入智能、交互的AI世界。
市场上AI视频产品的涌现速度几乎是按月来计时的。它们大多应用于影视、电商营销等领域,展现出广泛的应用前景。然而,仍存在一些挑战,如算力和合规风险。企业需要投入大量资源和时间来克服这些挑战。此外,AI视频的商业化路径仍然面临长期培育期的问题,因为高昂的模型训练与推理成本以及分散的C端用户需求使得变现变得困难。
展望未来,AI视频的时代已经到来,如何降本增效、占领更多市场份额将成为各大互联网大厂和科技企业面临的重要课题。
最新发现
相关资讯
针对SEO优化的标题建议:字节应对AI视频降本挑战,谁将肩负重任?
自Sora引领AI视频时代以来,国内外各大技术公司纷纷投身这一新兴领域的竞争。面对更加交互、沉浸的视频新时代,如何有效应对成本、质量和性能方面的挑战成为关键。 在最近的视频云技术大会上,火山引擎联合英特
2025-02-02 23:05:13
北京亦庄全域人工智能之城建设首批成果发布
主动式智能座舱缔造全新驾乘体验、全新一代工业人形机器人迈入工厂实训新里程、智慧课堂打开教学“多种模式”……近日,在北京经济技术开发区(北京亦庄)举办的北京·亦庄全域人工智能之城创新发布会上,北京亦庄全域
2025-02-02 22:45:05
Sora还没来,AI视频赛道一夜入秋
当下,各路生成式AI工具落地如火如荼。据全球知名数据机构SimilarWeb统计,2024年9月,稳居全球第一的ChatGPT网站月访问量环比增长18 71%,达到31 24亿次。同时,聊天机器人Gemini、虚拟角色伴侣Character AI、AI
2025-02-02 22:25:01
人民中科跨模态大模型“白泽”完成生成式人工智能服务备案
人民网北京10月21日电 北京市委网信办今日发布公告,根据《生成式人工智能服务管理暂行办法》,截至10月21日,北京市新增12款已完成备案的生成式人工智能服务,累计已完成94款生成式人工智能服务备案。其中,人民
2025-02-02 22:04:58
微信悄然加码AI,“AI微信”是腾讯的又一个阳谋?
微信,那个被认为“最佛系更新”的国民超级软件,最近越来越忙了。10 月 8 日,微信鸿蒙原生版正式开始邀请内测。尽管这个鸿蒙原生版只提供了最基本的聊天、朋友圈、收付款功能,但仍然为鸿蒙补全了软件生态最重要
2025-02-02 21:44:54
OPPO坚定信念,AI战略实现重大突破
自进入2018年以来,国内智能手机市场经历了一段持续低迷的时期。众多手机厂商因此面临着巨大的压力,纷纷寻求创新以寻找新的出路。随着2023年AI大模型的持续火热,AI及泛AI硬件如AI PC、AI手机等受到了业界的广泛
2025-02-02 21:24:49
今日热榜
马来西亚设立国家人工智能办公室
2024-12-19 16:44:28中美AI竞赛开启:既决高下,也决生死
2024-12-31 12:33:04通用人工智能,是个啥智能?
2025-01-06 17:44:07首届中医人工智能高质量发展论坛开幕
2025-01-16 15:45:46谷歌发布新一代人工智能技术
2024-12-19 16:43:53聚焦人工智能、区块链、量子科技等9大前沿领域,2024年上海市产业青年创新大赛颁奖大会在静安举行
2024-12-19 17:08:14花6.5万元购“AI数字人”直播带货被禁播?买家能解约吗?法院
2024-12-19 21:30:55通用人工智能国赛为何连续两年落地安徽?
2024-12-19 23:31:31AI“魔改”短视频要严守二创边界
2024-12-20 01:31:46新华网评:AI技术不应用来造谣生事
2024-12-20 06:52:57热门推荐