谷歌新的Lyra语音编解码+AV1可以实现56kbps低带宽视频聊天

  • 时间: 2021-02-28 04:17:47

  谷歌的人工智能团队宣布了一种非常低比特率的语音压缩编解码器"Lyra",设计用于 WebRTC 和其他视频聊天等用途。Lyra 的比特率非常低,当与 AV1 视频编解码器结合时,有可能允许通过 56kbps 的互联网连接进行视频聊天。

W38H8[SUEI{}_BGIPC@VMOH.png

  谷歌工程师在周四正式宣布了 Lyra,作为这个新的编解码器来挑战 Opus 等竞品。Lyra 利用机器学习使其适合提供极低比特率的语音压缩。公告中指出:"Lyra 目前被设计为以 3kbps 的速度运行,听觉测试显示,Lyra 在该比特率下的表现优于其他任何编解码器,并与 8kbps 的 Opus 进行了有利的比较,从而实现了超过 60% 的带宽节省。Lyra 可以用于带宽条件不足以满足更高比特率的地方,而现有的低比特率编解码器无法提供足够的质量。"

image2.pngimage1.png

  谷歌已经用数千小时的音频训练了 Lyra,演讲者使用 70 多种语言,使用开源音频库,然后与专家和众包听众验证音频质量。Lyra 的设计目标之一是确保普遍可访问的高质量音频体验。Lyra 在广泛的数据集上进行训练,包括无数语言的演讲者,以确保编解码器能够稳健地应对可能遇到的任何情况。

  作为 Google AI 博客公告的一部分,他们还详细介绍了 Lyra 与 AV1 的配对可以让那些仍在使用 56kbps 调制解调器的用户获得视频聊天支持,"Lyra 可以在云环境中使用,使具有不同网络和设备能力的用户可以相互无缝聊天。将 Lyra 与新的视频压缩技术(如 AV1)配对,将允许进行视频聊天,即使是通过 56kbps 拨号调制解调器连接到互联网的用户。"