写点什么

到处都能刷到的 AI 视频,真没你想的那么简单

  • 2024-11-20
    北京
  • 本文字数:2366 字

    阅读完需:约 8 分钟

大小:1.20M时长:06:59
到处都能刷到的 AI 视频,真没你想的那么简单

“ 疑似使用了 AI 生成技术,请谨慎甄别 ” 


大家有没有发现,这行小字有点像 “ 广告仅供参考, 请以实物为准 ” ,已经几乎在生活中越来越常见了。


特别是现在的短视频平台。


刷个西游记,能看到 AI 妖精真身。



甚至看一个动画片,画面还总是 AI 合成的。


AI 视频越来越多了


虽然掀起 AI 视频浪潮的 Sora 还在难产,但 AI 视频时代或许已经悄然而至。


东吴证券的一份研报里就预测,中国 AI 视频生成的潜在行业空间,可能拥有超过 5800 亿元的市场。


但随着市场不断火热,行业的一些问题也逐渐暴露到公众视野:


视频化和 AI 确实都是未来,但像是成本问题、质量问题、协同问题和性能问题,都萦绕在所有初创企业,大厂们的心头。



就拿成本问题和质量问题为例。


大家都知道,目前的生成式大模型特别是视频,就是一个力大飞砖的过程,需要用海量数据进行训练。


而超大规模视频训练数据,又会对计算和处理数据、以及数据本身有着天量需求,随之而来的成本增加是一个天文数字。



GPT-4o 作为一个老款 AI ,开发成本 “ 仅 ” 为 1 亿美元训练成本大概在 7800 万美元左右


而视频模型的训练成本就更高了,以年初推出的视频模型 Sora 为例,其训练和推理所需的算力需求,分别就达到了 GPT-4 的 4.5 倍和近 400 倍。。。


除了天价训练成本外,大模型训练样本质量、处理链路复杂,涉及多个环节,需要多团队协作;自研 / 第三方, GPU 、 CPU 、 ARM 等多种异构算力资源,又需要灵活调度部署。。。


所以,对不少准备拥抱 AI 视频的公司们来说,当务之急就是想尽办法,解决这些问题,才能更快地进化。


要论玩视频的高手,抖音和火山引擎可就有话说了


上个月底字节推出的爆火的 PixelDance ,效果那是杠杠的。


而在 15 号结束的火山引擎视频云技术大会上,开场用了定制数字人谭待来和大家沟通。


结果效果好到,现场参会者们,不少都以为这是视频抠图。


而这些高质量 AI 产出背后,其实离不开一个叫 BMF 的智能框架


火山引擎通过和自家大模型团队在内部合作,一起把海量的视频数据进行预处理。


最后基于火山引擎音视频处理平台和 BMF 框架,在短时间内生产了足够多高质量的视频素材,用于模型的训练,才有了 PixelDance 。


功臣之一的 BMF ,为什么能够做到这些呢?



我们用个生活中常见的例子来解释:


一个公司开发大模型就好比你家做年夜饭。


为了吃上一顿丰盛的年夜饭,你爸爸负责买菜、妈妈烧饭、奶奶包饺子、你搬桌椅板凳。。。


所有人都得有分工,从头忙到尾,可能还得时不时打个电话发个微信互帮互助,最后一算,好家伙,原来吃顿年夜饭还得花这么多钱。


而 BMF 就是火山引擎推出的一个 “ 年夜饭一键全流程套餐 ” ,它提供了一系列的工具和服务,帮你轻松、快捷地准备好年夜饭。


这个套餐重点针对性地解决了我们前面说到的 4 个行业痛点,进行了相应的调整。



比如为了解决视频训练数据质量问题,他们掏出了多种算法对视频进行多维度的分析和筛选,做到了充分精细化的过滤;


应对性能难题,他们又利用 BMF 框架的灵活调度,提前调配好了性能


这就相当于准备年夜饭一早就做好了攻略,买菜交给了多多买菜送货上门、烧饭找了五星级大厨专门掌勺、桌椅板凳安排了专门的小工打杂。。。


反正就是用了 BMF 这套框架,又便捷又省心又省钱



搞定了企业这边的需求,火山引擎也没忘了大家伙。


如今,大家设备的算力不断上涨,与之而来的就是对视频画质提升的强烈需求。


火山引擎通过得天独厚的优势,每天在抖音 / 西瓜等 app ,面对上亿用户,处理海量视频图片。


获得了这么丰富的经验之后,火山引擎在 BMF 基础上,沉淀出了一个更适合普通用户体质的 “BMF lite” ,实现了更轻量、更高效、更通用的进化。



比如相较于云端,在用户端侧,对于功耗,内存非常敏感,而场景又涉及 Android 、 ios 、 PC 等多平台。


于是 BMF-Lite 就重点建设基于跨平台,资源复用的算法包的框架设计。


简单说就是统一了各个平台的接口形式,方便集成部署。


再用算法控制器来复用相同的算法实例,在抖音播放场景,点播跟直播播放大部分都是只会生效一个,可以最大程度地复用资源。



而除了 BMF 为代表的智能框架,火山引擎还提出了智能算力和智能编解码


火山引擎直接在去年掏出了一款自研视频转码芯片,将自研的视频编解码技术融入到了里面。


好处就是,针对视频点播、直播等特定场景,这款转码芯片有着更高的计算密度。


就这么说吧,一套视频编解码芯片服务器的转码能力,相当于上百台 CPU 服务器



今天视频转码芯片上线抖音后,通过实践数据表明,在同等视频压缩效率下,成本能节省 95% 以上。


而针对编解码层,火山引擎推出了基于自研视频转码芯片构建的 “BVE1.2 编码器 ” 


这个编码器大胆融合了深度学习技术,推出了革命性的智能混合编解码解决方案,将传统压缩技术与深度学习压缩技术有机融合成为一个整体,极大地提升了编解码的效率,提升了编码性能。



在前不久结束的的第六届深度学习图像压缩挑战赛( CLIC 大赛 )中, “BVE1.2 编码器 ” 拿到两个冠军足以说明实力。


这一套小组合拳下来,感觉有兴趣的厂商们,估计满脑子都是 “ 付款码扫哪儿 ” ?


你还别说,火山引擎也的确没打算藏着掖着。


像前面说的 BMF 框架,早在去年就已经开源了,更新完的 BMF lite ,也是直接开源。



总的来说,目前,大模型的进化还在持续,视频 AI 公司之间的竞争也只会日益激烈。


但如果大家只是闭门造车,互相拿成果比拼,用产品说话,可能会显得竞争有余、合作不足。


而作为可能是全中国短视频玩得最熟练的字节跳动,他们旗下的火山引擎一次次地将内部技术、框架开源。


特别带来的 BMF 框架以及它和智能算力和智能编解码组成的一整套智能底座,的确能够帮助企业们节约了大量时间和成本,更好地帮助 AI 项目落地发展。


这种竞争和合作共存的态度,才是中国 AI 最乐意见到的场面。


一枝独秀难成林,万紫千红才是春。

2024-11-20 09:009949

评论

发布
暂无评论
发现更多内容

内部CRM和商业化SAAS CRM的区别

久歌

SaaS 架构设计 CRM

Web Development Technology Trends for 2023

Mahipal_Nehra

UI UX AI Codec Metaverse

数据治理:指标体系管理

用友BIP

2023免费双系统虚拟机软件CrossOver2023

茶色酒

crossover CrossOver2023

火山引擎边缘云荣获2022全球分布式云大会两项大奖

火山引擎边缘云

云原生 边缘计算 边缘云 火山引擎边缘计算

测试如何发展副业,提升斜杠收入

老张

码农副业 斜杠

爱奇艺:基于龙蜥与 Koordinator 在离线混部的实践解析 | 龙蜥技术

OpenAnolis小助手

开源 cpu 爱奇艺 混部 龙蜥操作系统

RocketMQ 全链路灰度探索与实践

Apache RocketMQ

RocketMQ 服务端 灰度

移动开发跨平台框架,你了解多少?

FinClip

量化合约对冲交易机器人app系统开发源代码部署

开发微hkkf5566

国产自研、安全、高可用——袋鼠云大数据基础平台EasyMR筑基企业数字化转型

袋鼠云数栈

大数据 hadoop 数据中台 基础数据平台 12 月 PK 榜

照亮无尽前沿之路:华为正成为科技灯塔的守护者

脑极体

接口测试快速入门-1

度假的小鱼

接口测试 11月月更

华为云数据库GaussDB(for Influx)与开源企业版性能对比

清欢科技

50亿海量数据如何高效存储和分析? 华为云数据库GaussDB (for Cassandra) 3个秘诀搞定

IT科技苏辞

小令观点 | 不希望我的身份被别人冒用,该怎么办呢?

令牌云数字身份

网络安全 人脸识别 芯片技术

【愚公系列】2022年12月 微信小程序-页面栈和页面路由

愚公搬代码

12月月更

华为云数据库GaussDB(for Cassandra)揭秘:内存异常增长的排查经历

科技说

WeLink互动直播:维护网课秩序,杜绝外人乱入

与时俱进的时代

5.外包学生管理系统实战

程序员小张

「架构实战营」

腾讯智慧农业首次亮相,助力青海大通农产品走进大湾区

科技热闻

App长登录思考与实现

石君

信息安全 APP开发 认证

常用的十大Python开发工具

千锋IT教育

API网关与南北向安全设计

阿泽🧸

API网关 12月月更

空间节省50%,时序性能提升5倍,三一重工从Hadoop+Spark到MatrixDB架构变迁实现One for ALL

YMatrix 超融合数据库

三一重工 超融合数据库 数据库· YMatrix

干货|成为优秀软件测试工程师的六大必备能力

飞算JavaAI开发助手

2022-12-01:从不订购的客户。找出所有从不订购任何东西的客户,以下数据的答案输出是Henry和Max,sql语句如何写? DROP TABLE IF EXISTS `customers`; C

福大大架构师每日一题

数据库 福大大

华为云数据库GaussDB(for Cassandra)揭秘:高性能低成本是什么样的体验?

科技说

华为云数据库GaussDB (for Cassandra) 数据库治理 -- 大key与热key问题的检测与解决

IT科技苏辞

04 Redis sentinel 模式存储试卷

神奇的叶叔叔

NTFS读写工具Tuxera for Mac2023下载及功能介绍

茶色酒

Tuxera2022 Tuxera NTFS2022 Tuxera NTFS Mac2022

到处都能刷到的 AI 视频,真没你想的那么简单_字节跳动_火山引擎视频云_InfoQ精选文章