GVoice AI Codec语音技术落地《和平精英》，实现手游端“超音速”游戏语音体验

你有没有试过如许的情景：当你“开黑”正酣，率领着队友井井有理朝“仇敌”后方前进，蓦地语音掉线，原因关系不到队友而堕入孤掌难鸣之境，进而痛失好局，不能不咽下凋零的苦果……

跟着移动端游戏产物的产生，让游戏内的语音交换成为天南地北的网友应酬的刚需，也成为界说“高品质游戏”的主要成分之一，游戏内语音交互已经成为近年来浩瀚游戏厂商的关注核心。

最近，腾讯游戏问世了最新游戏语音身手计划，腾讯游戏光子S工作室和平精英团队联袂腾讯AI Lab、腾讯游戏CROS GVoice(腾讯游戏语音)团队，基于深度学习在语音编解码器上的一直突破，将AI Codec应用于和平精英游戏中，在行业内领先杀青AI Codec 更低码率更高质量的语音编码，由此成为首个将AI Codec身手全部应用于游戏语音范围的产物。

弱网境况下的语音互换成“开黑”痛点

此前艾媒询问对移动游戏交际干系资料的统计剖明，近 40% 的网友由于交际原因选择一款游戏;15.6% 的网友由于一款游戏交际性差而选择摆脱。因而，抬高游戏的交际属性已成为各大游戏厂商的紧要工作。

作为裁减网友“孤军奋战”感想的有用法子，游戏语音自降生起就深受网友爱好，并且在手游时代，网友们对移动手机真个游戏语音传输的质量、延伸时间和使用处境，提议了越来越高的请求。

事实上，及时语音通信技术在行业内早已不是一个新话题，但游戏内及时语音换取不仅仅是单一地告竣及时通话便可。一个“好”的语音，最重要的是听感质量合适人的听觉请求，在这个前提下，传输码率越低，网友破费的流量就越少;占用算力越少，CPU的能耗就越少。

成长至今，游戏语音传输身手在两个方面追寻突破。

起首是在弱网顽劣境况下，奈何保证语音相易流利是游戏语音技艺面对的一个严重课题。异样的听感质量，假如语音新闻的码率越低，其传输的连贯性就越有保护，换言之，低码率更适用于弱网境况。

其次，算力的消磨也是游戏语音要思索的身分。因为重度游戏对CPU算力请求较高，是以，何如让语音功能尽量的缩短对CPU的占用，在保险网友的换取经验的同时，过错游戏操作和较量争论资本进行过量的挤压，成为个中的核心。

工钱智能为游戏语音加之“BUFF”

当语音开黑、游戏交际成为刚需，浩繁国内外的科技企业也开始涉足这一规模。

在保证语音质量的前提下，古板的音频解码技巧Codec致力于使用较少的网络带宽资本、较低的传输码率去通报更保果真语音新闻。跟着深度学习技巧的进展，合座基于神经网络的语音编码器慢慢代替了古板的基于暗记解决的攻略，成为了业内前沿的处分计划。在此基础上，基于人工智能技巧进化的AI Codec也越来越受到业界的关注。

为了给游戏内语音交互加之人工智能的“BUFF”，游戏界也进行了诸多测试。譬喻，业界罕用的Opus声响编码款式在低码率语音新闻传输方面再现不如人意。2019年，行业浮现了部分超低码率 AI Codec，可以以极低码率对语音进行压缩，然则还原出的语音质量不太梦想。

Google异样将眼光眼神对准了这一范畴。2021年头，Google问世了基于自回归网络的AI Codec Lyra。Lyra可以或许在以低码率传输的同时确保声音效果，但不克不及供应高质量的及时通讯，算法生计延伸的情形。 半年后，Google再次问世了新的AI Codec模子SoundStream，比拟于Lyra，SoundStream在语音传输质量方面有所提高，但因为模子复杂度较高，无奈在大多数的手机上安稳运转。

首个游戏移动端AI Codec语音技艺落地和平精英

与此同时，针对游戏内语音交互，国内厂商也在主动探索更好的处置计划。

作为国内头部兵书竞技手游，和平精英一贯致力于提高游戏品德优化小伙伴游戏体味。 此中游戏语音原因应用情景浩瀚，使用率极高，语音品德的是非对游戏主旨体味有着至关重要的浸染，一贯都是和平精英团队最关注的功能。

2021年关，和平精英团队联袂腾讯AI Lab、CROS游戏语音GVoice团队一块正式立项GVoice AI Codec研发项目，基于腾讯音频与语音处置惩罚Oteam在语音编解码目标的身手蕴蓄堆积，新项目出力杀青高质量、低码率和低功耗的游戏内及时语音境况。经过针对游戏场景进行深度优化，GVoice AI Codec在游戏场景下的语音处置惩罚算法比古板即时通信软件有加倍优越的音质体现，并且在弱网境况下，以低码率确保了音质体现不受侵害，保证在移动端得以应用。

腾讯游戏语音GVoice是Tencent Games CROS为游戏打造的语音处分计划。资料显示，现在GVoice服务已经笼罩举世超出200个国度和地域，日好动网友超3亿，关联处分计划被应用于和平精英英雄联盟手游咫尺明月刀手游等数千款游戏。GVoice AI Codec技艺也将逐渐拓展至其他游戏，提高语音互换畅通度，改观弱网情况下的网友经验。

据了解，GVoice AI Codec 经过自研编解码模子算法，传输带宽杀青了压缩，并以 5-12kbps 的AI Codec替代了正本24kbps的Opus，网友在客观听觉上的尝试没有昭着差异。这意味着，GVoice AI Codec在担保音效质量的同时，传输码率更低，流量也更少。

在算力破费方面，GVoice AI Codec需求将这一运算复杂度与资本占用极高的编解码体式格局，经过模子压缩、量化、并行运算、移动端指令集适配等工程化法子，不竭下降运算与资本开支，抵达移动端落地请求。资料显示，GVoice AI Codec在手机OnePlus 3双工通话下尝试，比拟Opus规格 CPU占用率资本增进约为2.3%;在iPhone 6s下尝试，选用GVoice AI Codec后CPU占用率增进约1.3%。这表白，GVoice AI Codec用极低的CPU使用率增幅，换来了手机端更低流量的高质量及时通话。

(左图为原始语音，右图为GVoice AI Codec 编解码后语音，从波形上看右图语音保真度高，客观听感挨近原始语音)

GVoice AI Codec手艺在和平精英中应用后，语音服务质量团体获得了进一步的提高。起首，经过对语音流量的优化，GVoice AI Codec可以或许极大的提高网友在交通出行、户外活动等弱网境遇下的语音流畅性，防止在猛烈对打时呈现卡麦、断麦的环境。其次，GVoice AI Codec因为使用AI模子算法，比拟古板的语音算法在人声传输方面会有所提高，在和平精英中网友间的语音疏通效果会越发清澈，无论是兵法合营还是多人闲谈都有更佳的交际尝试。项目组经过在不一样喧嚣境遇、多种游戏场景下进行了多轮语音尝试，究竟显示均得到了更优越的网友反馈。

从游戏进展的角度而言，GVoice AI Codec在和平精英上的乐成落地，为更多游戏语音身手的研发收效落地打下了基本，使得关联身手拓展至更多游戏成为或许。

无酬酢，不游戏。能够意料的是，跟着云游戏、VR/AR等更多游戏品类的萌发，GVoice AI Codec 技艺也将在更多品类的游戏经验方面起到越来越大的功用，成为新的行业尺度。