8月22日,以“视象新生”为主题的火山引擎视频云 & AIGC 大会成功举办。
会上,火山引擎发布自研视频编解码芯片,并携手英伟达发布多媒体处理框架BMF(Babit MultiMedia Framework),并宣布全面开源。这2项技术的发布,标志着火山引擎在全行业视频化时代下对技术的不断探索,为视频的体验创新持续注入新动力。
火山引擎视频云基于抖音集团大规模的应用实践和打磨,实现了从通用计算到异构计算的跃进,可以根据视频场景,提供不同的算力支持。
高密度、快压缩和低成本,是火山引擎自研视频编解码芯片的3大独特优势:
更高密度:一台芯片服务器的转码能力,相当于百台CPU服务器的算力;
更快压缩:相比行业主流硬件编码器压缩效率提升30+%;
更低成本:将单个视频的计算、存储和传输的边际成本达到平衡。
火山引擎视频编解码芯片的应用场景非常广泛,包括点播转码、直播转码、云游戏、云VR/AR等。火山引擎视频编解码芯片可以在为企业节省大量算力成本的同时,为用户带来更清晰的画质和更低的延时。
火山引擎携手英伟达发布多媒体处理框架 BMF ,旨在帮助企业和开发者将各类视频的原子能力与方案做到优势互补、协同工作和快速落地。多媒体处理框架 BMF 的整体架构分为应用层、框架层、模块层和异构层4部分:
应用层: 即顶层,为用户提供多语言的API,包括Python、Go、C++,方便用户根据不同的项目需求进行开发集成;
框架层:即中间层,包括框架对 graph / pipeline 的调度、跨数据类型跨设备的数据流转 Backend、以及常用的跨设备 reformat、color space conversion、tensor 算子等 SDK ;
模块层: 包含了具备各种原子能力的模块,提供多种语言的模块开发机制,用户可根据自身需要将算法/处理实现为 Python、Go、C++ 语言的任意一种;
异构层: 负责提供高效的视频处理算力,包括火山引擎自研的视频编解码芯片 ASIC 。
火山引擎携手英伟达发布的多媒体处理框架 BMF
火山引擎携手英伟达,针对GPU相关的框架层能力、处理能力进行了深度优化,使得GPU能够充分发挥其强大的并行计算能力,应用于各类视频AI场景。比如在大型活动直播、电商直播间等场景中,通过“极致超清”技术,能够有效提升画质体验;针对不同损伤情况的经典影片,通过“AI修复”技术,能够对损伤后的影片进行全面的画质提升;在VR/AR等复杂图像场景中,通过“ VR 360° 全景图像技术”帮助图像实现更加高清的效果。
目前,BMF 已经全面开源:包含 BMF 框架层整体开源、9个开箱即用案例、20+API 调用范例,旨在帮助开发者低成本地构建视频应用。 BMF 可以做到从生产到消费全链路视频场景的支持,不仅为抖音集团自身业务提供强大的技术支撑,也助力互联网、汽车、金融、传媒等行业客户加速视频化新进程,目前已应用在点/直播转码、云编辑、移动端后处理等场景。
视频化是数字时代的重要特征,正在为全行业输入商业变革的增长源动力。在全行业加速进入视频化时代的今天,火山引擎视频云坚持实践探索,通过领先、可信赖的云和智能技术,帮助全球企业降本增效,加速创新,共建视频开发生态。