Techo Park开发者大会召开,腾讯天籁实验室发布《联合信源信道编码白皮书》

发布时间:2022年06月17日
       12月19日-20日, 由腾讯主办的2020 TechoPark开发者大会在北京成功举办。
        本次大会汇聚了全球顶尖的行业专家和技术爱好者, 围绕音视频、大数据、人工智能、5G边缘计算、物联网等诸多热门技术话题进行了深入探讨。 2020年突如其来的疫情, 让数字通讯成为人与人之间重要的交流方式, 也对实时音视频通讯的稳定性和通讯效果带来了极大的考验。 在网络传输过程中, 实时音视频通信需要面临用户体验和运营成本的双重约束。 会上, 腾讯天籁实验室专家、研究员肖伟发布了《联合信源通道编码技术白皮书》, 结合信号源和通道联合优化策略, 融合经典信号处理和深度学习新 技术。 目前该方案已在腾讯会议等亿级产品中得到验证, 在保证用户体验的同时显着降低带宽和延迟。 腾讯天籁实验室和传播效果专家研究员肖伟提出了一个很好的测试。 由于业务量的激增,

RTC服务在保障用户体验方面面临诸多困难, 包括但不限于通话质量、最小化卡顿、端到端延迟、带宽成本等。 在网络传输过程中, RTC方案需要面对用户体验和运营成本的双重约束, 是一个很大的挑战。 肖伟介绍了RTC的复杂链系统。 以发送端到接收端的通信为例, RTC要经过采集、预处理、编码、传输、解码、增强、回放等多个阶段。
        阶段都会影响最终体验。 从端到端的角度来看, 影响通话体验的因素可以分为来源和渠道(链接)两部分。 只有采集端将源完全传输到接收端, 用户才能获得高质量的体验; 否则, 如果中间数据包丢失,

就会出现声音卡顿等现象。 端到端视角的语音通话体验影响因素 肖伟强调, 在RTC业务中, 传输过程中的丢包是一个重要的挑战。 因此, 网络抗性的提升是RTC业务不可回避的话题。 对于网络阻力问题, 主流的RTC解决方案围绕着通道侧的方法。 如果完全依赖通道侧方法, 实际应用中会面临其他问题。 一方面, 如果网络阻力完全来自带外, 会导致带宽成本激增; 另一方面, 重传等操作意味着需要进行报文组合、解析等迭代操作, 增加了时延。 因此,

要打造良好的RTC通话体验, 需要自上而下, 结合信源和渠道进行系统设计。 腾讯天籁联合信源通道编码方案提出三种抗网络策略 为了解决上述问题, 腾讯天籁实验室提出联合信源通道编码策略, 并发布了《联合信源通道编码白皮书》。 首先, 提高源端方法的能力上限。 与标准带内前向纠错相比, 新的源侧前向纠错需要更强的个体电阻。
        例如, 支持 40% 的丢包率。 其次, 灵活调用带外和带内电阻, 以便在电阻稳定性和带宽消耗之间进行更灵活的折衷。 借助测试平台提供的经验数据, 对相关控制参数进行迭代升级。 第三, 前向兼容性问题,

要保证新旧协议之间没有互操作性。 源道联合编码的基本框架 据肖伟介绍, 腾讯天籁联合源道编码方案通过有效结合源端和信道侧抗策略, 在保证用户体验的同时, 有效降低了带宽和时延成本。 值得一提的是, 各种网络传输条件下的测试结果表明, 该方案可以降低30%的带宽; 同时可以进一步降低40-60ms的延迟, 进一步提升用户体验。
        目前, 腾讯天籁的新技术联源频道编码方案已经在腾讯发布会上推出。 肖伟表示, 信源和信道联合优化策略的结合, 以及经典信号处理与深度学习相结合的新技术将成为未来RTC解决方案的重点。 联合信源通道编码方案的发布, 也标志着腾讯天玑实验室在实时音视频通信领域的又一次突破。 长期以来, 为了解决实时音视频应用场景中的各种挑战, 腾讯天籁实验室围绕音频通信核心体验的技术和框架进行了深入探索。 在今年9月召开的腾讯全球数字生态大会上, “面向实时音视频应用的新一代实时音频技术品牌”——腾讯天籁正式发布。 小薇表示, 腾讯天籁科技和联合源频道编码方案只是一个开始。 未来, 腾讯天籁实验室将继续研究新的音视频技术, 满足更多行业场景下的实时音视频需求, 为推动更多更丰富的场景而努力。