下一代视频编码技术的云视频应用探索 _编码技术

本文由华为云资深产品专家左雯在LiveVideoStackCon2020线上峰会的演讲内容整理而成，本文从视频编解码技术的趋势、难点和挑战以及华为云视频产品的编解码关键技术实践与成果两方面介绍下一代视频编解码技术优化应用的探索。

文 / 左雯
整理 / LiveVideoStack

大家下午好，非常荣幸参加LiveVideoStack首届音视频线上峰会。先自我介绍一下，我叫左雯，来自华为云，是云视频服务的产品经理。在做产品经理之前，一直从事视频编解码算法研究优化、转码产品架构设计等工作！今天参加这个专题目的有两个，一个是想通过这次峰会，向大家分享一下华为云视频对下一代视频编码技术发展的想法和应用成果，另一个是像各位专家学习，相互交流，促进下一代视频编码技术的快速发展，推动云视频这个行业的发展。

今天分享的主题包括三个部分，首先是华为云视频对视频行业发展趋势的一些看法，以及这些趋势对下一代视频编码技术提出的挑战；其次从标准角度来介绍下一代视频编码技术以及华为相关工作；最后从云视频应用角度来具体介绍华为云在视频编码技术上的一些实践和探索。希望能给大家带来干货和技术启发。

1. 视频行业趋势

文章插图

5G、云、AI已经成为ICT行业甚至是整个社会的发展趋势，促使整个视频行业需求和技术不断演进，推动整个视频行业不断升级。如图所示，视频生命周期的每个环节都在更新升级，包括视频生产、视频处理、视频传输和视频消费。

视频生产：多源数据的采集，包括超高清、VR、自由视角、3D建模和视频渲染。
视频处理：基于AI让视频处理更实时、智能和准确，包括各种编码方式。
视频传输：超低时延的传输，云边协同等等。
视频消费：智能终端的深度结合提供视频服务的最佳体验。

视频行业本质是对媒体数据的处理，背后是算力、存储、网络、AI的支撑，同时视频行业又推动着5G、云、AI的不断前行，相辅相成！

文章插图

视频演进带动了算力、存储、带宽需求的大幅增长。简单来看，视频分辨率越来越高，从高清到超高清再到8K/VR 。算力增长 24倍，存储增长12倍，带宽增长 20倍。这些需求通过云，也只有通过云才能很好的满足，实现高质量的视频体验。云原生视频是行业趋势，视频将成为云的基础服务能力。

文章插图

前面说的是行业的整体趋势，下面说一下具体场景。互联网视频发展已经历两个阶段，第一阶段从08年到13年，以长视频VOD、点播观看为热点；第二阶段，从13年到19年，也就是去年，其实还在延续，以直播、短视频为热点；第三阶段，也就是下一代会以什么为热点？我们认为因为5G、云、AI的推动，视频将进入实时互动、VR/AR时代。

互动视频方式从IM向实时音视频过渡。直播连麦，主播PK ，直播带货，视频分发方式的升级，百毫秒级超低时延实时互动视频成为趋势。

VR/AR ， 360度视角带来沉浸式体验革命，用户从看视频向玩视频过渡，体验提升的同时，视频传输能力也从兆级向十兆甚至百兆级单流带宽提升。

文章插图

RTC实时音视频会成为5G时代基础设施的核心控制点， RTC应用很广泛，它的市场年增长率是30%左右，而且这项技术不仅能赋能直播、游戏等泛娱乐行业，更能在在线医疗、教育、金融等大视频行业渗透。现有的实时音视频市场正处于爆发期，玩家很多，但由于它是非云厂商，难以持续发展。原因之一是它的技术门槛比较高，特别是像音视频编码或者整个RTC网络的构建，另一点是目前各家均采用私有协议的方式接入，各家互通、客户的自由切换都比较困难。在RTC视频业务产品上，我们认为音视频编码处理将是各家构建技术壁垒和性能差异化竞争力的关键之一。