AI 技术加持,高通与产业伙伴推动视频编码技术不断进步

robot
摘要生成中

如今,各类视频应用已广泛渗透到人们生活的方方面面,比如春节期间,用手机看春晚、视频拜年等成为日常生活的一部分。与此同时,各类视频内容的迅猛增长,也给网络带宽、存储空间等带来了巨大的压力,在此背景下,视频压缩技术变得越来越重要。

VVC(多功能视频编码)是当前最新的视频编码标准,与上一代标准 HEVC(高效视频编码)相比,VVC 能够在保证相同视频质量的前提下,将视频数据大小进一步压缩 50% 左右。目前,业界仍然在努力推动视频编码技术不断进步。最近,高通技术公司技术副总裁 Marta Karczewicz 在一篇博客文章中介绍,在去年 10 月召开的联合视频专家组(JVET)会议上,JVET 委员会审议了针对证据征集(Call for Evidence,CfE)的各类响应,为推动视频编码技术超越 VVC 标准能力提供支持。CfE 是视频编码标准制定中的一个重要过程,对于在正式征集提案之前判断新工具和新方法的改进幅度及其成熟度至关重要。

需要注意的是,本次 CfE 显示出一个重要的趋势,即提案广泛采用了增强压缩模型(ECM)工具。ECM 工具最初源自 2021 年 1 月 JVET 会议所启动的探索阶段,高通公司在当时提出了提案 JVET U0100,可在随机访问条件下相比 VVC 展现出 11.5% 的压缩效率提升。该提案成为后续探索工作的基础,其软件也被采纳为 ECM 的参考模型。之后,高通还联合多家积极参与 ECM 开发的公司,针对 CfE 提交了一份基于 ECM 的响应。此外,高通还发布了优化后的软件,集成最新的 VTM(VVC 测试模型)与 ECM 编码工具(JVET AN0271),为研究社区和行业相关方提供更高效的平台,用于评估各类编码技术,共同推动视频编码技术的发展。

高通是视频编解码技术领域的领军企业,在重要视频技术的发展中扮演了重要的角色,是 HEVC、VVC 等视频编码标准的领先技术贡献者和开发者。例如 VVC 标准的制定,始于高通向国际电信联盟电信标准分局(ITU-T)视频编码专家组(VCEG)提交的 COM16-C.806 提案。该提案包含了相应软件,在随机访问配置下,其编码效率较 HEVC 测试模型(HM)提高了 10.4%。鉴于其重要性,VCEG 专家组将该软件作为联合探索模型(JEM)的起点。

Marta Karczewicz 在文章中谈到,JEM 在 VVC 标准制定过程中发挥了关键作用,作为新理念和新方法的测试平台,其中许多被验证的新理念和新方法最终被纳入了 VVC 标准。她同时表示,正是看到协作式探索加速了新一代压缩技术的开发,在 VVC 标准完成后,高通再次将其研究成果和软件引入标准化论坛。

另一方面,伴随着人工智能技术的迅猛发展,AI 相关技术也被应用到视频编码领域。例如,ECM 通过集成神经网络帧内预测和环内滤波等基于深度学习的方法,实现了更高的压缩效率。Marta Karczewicz 认为,随着视频压缩技术的不断发展,神经网络有望通过解决传统混合编码框架(基于帧间 / 帧内预测与变换)的局限性,引领下一次重大技术变革。

展望未来,相信随着视频编码、AI 等技术的持续进步及投入应用,人们将在视频时代享受到更好的应用体验。Marta Karczewicz 表示,即将于 2027 年 1 月启动的提案征集(Call for Proposals)评审工作,将为进一步推动技术进步提供契机,届时各类创新理念和解决方案将接受全面的测试和优化。高通也将在这一过程中继续发挥作用,包括提供相关技术方案、软件等,共同推动未来标准的发展。

此页面可能包含第三方内容,仅供参考(非陈述/保证),不应被视为 Gate 认可其观点表述,也不得被视为财务或专业建议。详见声明
  • 赞赏
  • 评论
  • 转发
  • 分享
评论
请输入评论内容
请输入评论内容
暂无评论