字节跳动海外技术团队在全球视频编码领域取得最新突破。
联合视频专家组JVET官网显示，今年2月，字节跳动AVG(高级视频团队)推出视频压缩技术方案，可优化压缩质量，节省至少13%的存储和带宽。比如一个H.266/VVC标准(1080P分辨率)的180分钟高清视频，大约需要3GB的数据量，应用新技术后只需要2.6GB。这是业界公开的单一智能编码工具的最佳性能增益。
字节跳动的AVG在美国加州成立了研发团队，有来自高通、微软、英特尔等巨头的资深研究员，也有来自国内外顶尖大学的新生代。在JVET制定新一代国际视频编解码标准H.266/VVC的过程中，字节跳动的AVG共提交了260个技术方案，其中130个被采纳，采纳方案数和采纳率均居世界第一，是H.266/VVC核心算法的主要贡献者之一。
视频是由图片连接起来的动态图像序列，视频编解码是视频应用的底层核心技术，用于对图像进行压缩和数字编码，以尽可能小的带宽传输高质量的视频数据。H.266/VVC可以将视频比特率降低到上一代标准H.265/HEVC的一半，而不影响图像质量。网速只够播放标清视频，也能流畅播放高清视频。
字节跳动AVG提出的新算法旨在通过深度学习技术构建一个减少视频压缩失真的滤波器(DAM)。主干是基于残差单元栈的深度卷积网络，辅以自适应模型选择，最大程度地适应具有复杂特征的自然视频。所谓残差单元是指通过引入跳层连接，允许网络关注变化的残差，类似于视频图像帧之间的残差。比如在武术高手的对决中，“剑光闪烁”，每一帧图像的大部分内容都是一样的，闪烁的剑光形成残影，这也是视频编码压缩的重点。
实验结果表明，与最新的H.266/VVC标准相比，字节跳动的DAM解决方案能够显著提高视频编码性能。亮度信号Y可以达到10.28%的性能增益，两个色度信号U和V分别可以达到28.22%和27.97%的性能增益。在优化视频质量的同时，数据量至少可以减少13%。
图：测试用例来自国际标准组织的测试视频。
据悉，字节跳动AVG自主研发BVC2.0编码器，首次参与国际权威MSU。
2020年视频编码器大赛在四项评价指标中获得第一名。AVG的所有研究成果也将通过升级BVC编码器投入应用，包括Tik Tok、西瓜视频、今日头条等。
App视频内容处理，以及云计算、云游戏等基础设施领域，为用户带来高清质量更高、播放更流畅的视频体验。
AVG不仅深度参与国际视频标准的制定，还为国内新一代视频压缩标准AVS3做出了重要贡献。AVS3视频标准采用了许多原始技术，包括块分割、运动矢量编码和预测以及颜色-亮度帧内预测。因此，字节跳动获得了2019年AVS产业技术创新提案奖，是迄今为止唯一获得该奖项的互联网企业。
字节跳动AVG的张莉博士表示，视频压缩标准作为服务提供商必须遵循的标准，不仅蕴含着不可估量的商业价值，也给用户带来了实实在在的便利。通过标准制定和产品研发，字节跳动将继续创新并输出技术能力，与业界携手为用户提供更好的视频服务。
编辑：高明
