你有没有试过这样的场景:当你“开黑”正酣,指挥着队友有条不紊朝“敌人”后方挺进,突然语音掉线,因为联系不到队友而陷入孤立无援之境,进而痛失好局,不得不咽下失利的苦果……
随着移动端游戏产品的爆发,让游戏内的语音交流成为天南海北的玩家社交的刚需,也成为定义“高品质游戏”的重要因素之一,游戏内语音交互已经成为近年来众多游戏厂商的关注重点。
近日,腾讯游戏发布了最新游戏语音技术方案,腾讯游戏光子S工作室《和平精英》团队携手腾讯AI Lab、腾讯游戏CROS GVoice(腾讯游戏语音)团队,基于深度学习在语音编解码器上的不断突破,将AI Codec应用于《和平精英》游戏中,在行业内率先实现AI Codec 更低码率更高质量的语音编码,由此成为首个将AI Codec技术全面应用于游戏语音领域的产品。
弱网环境下的语音交流成“开黑”痛点
此前艾媒咨询对移动游戏社交相关数据的统计表明,近 40% 的玩家因为社交因素选择一款游戏;15.6% 的玩家因为一款游戏社交性差而选择离开。因此,提高游戏的社交属性已成为各大游戏厂商的重要工作。
作为减少玩家“孤军奋战”感受的有效手段,游戏语音自诞生起就深受玩家喜爱,并且在手游时代,玩家们对移动手机端的游戏语音传输的质量、延迟时间和使用环境,提出了越来越高的要求。
事实上,实时语音通信技术在行业内早已不是一个新话题,但游戏内实时语音交流不仅仅是简单地实现实时通话即可。一个“好”的语音,最重要的是听感质量符合人的听觉要求,在这个前提下,传输码率越低,用户耗费的流量就越少;占用算力越少,CPU的能耗就越少。
发展至今,游戏语音传输技术在两个方面寻找突破。
首先是在弱网恶劣环境下,如何确保语音交流流畅是游戏语音技术面临的一个重要课题。同样的听感质量,如果语音信息的码率越低,其传输的连贯性就越有保障,换言之,低码率更适用于弱网环境。
其次,算力的损耗也是游戏语音要考虑的因素。由于重度游戏对CPU算力要求较高,因此,如何让语音功能尽可能的减少对CPU的占用,在保障用户的交流体验的同时,不对游戏操作和计算资源进行过多的挤压,成为其中的重点。
人工智能为游戏语音加上“BUFF”
当语音开黑、游戏社交成为刚需,众多国内外的科技企业也开始涉足这一领域。
在确保语音质量的前提下,传统的音频解码技术Codec致力于使用较少的网络带宽资源、较低的传输码率去传递更保真的语音信息。随着深度学习技术的发展,完全基于神经网络的语音编码器逐渐替代了传统的基于信号处理的方法,成为了业内前沿的解决方案。在此基础上,基于人工智能技术进化的AI Codec也越来越受到业界的关注。
为了给游戏内语音交互加上人工智能的“BUFF”,游戏界也进行了诸多尝试。例如,业界常用的Opus声音编码格式在低码率语音信息传输方面表现不如人意。2019年,行业涌现了一些超低码率 AI Codec,能够以极低码率对语音进行压缩,但是还原出的语音质量不太理想。
Google同样将目光瞄准了这一领域。2021年初,Google发布了基于自回归网络的AI Codec Lyra。Lyra能够在以低码率传输的同时保证声音效果,但不能提供高质量的实时通信,算法存在延迟的情况。 半年后,Google再次发布了新的AI Codec模型SoundStream,相比于Lyra,SoundStream在语音传输质量方面有所提升,但由于模型复杂度较高,无法在大多数的手机上平稳运行。
首个游戏移动端AI Codec语音技术落地《和平精英》
与此同时,针对游戏内语音交互,国内厂商也在积极探索更好的解决方案。
作为国内头部战术竞技手游,《和平精英》一直致力于提升游戏品质优化玩家游戏体验。 其中游戏语音因为应用场景众多,使用率极高,语音品质的优劣对游戏核心体验有着至关重要的影响,一直都是《和平精英》团队最关注的功能。
2021年底,《和平精英》团队携手腾讯AI Lab、CROS游戏语音GVoice团队一起正式立项GVoice AI Codec研发项目,基于腾讯音频与语音处理Oteam在语音编解码方向的技术积累,新项目着力实现高质量、低码率和低功耗的游戏内实时语音环境。通过针对游戏场景进行深度优化,GVoice AI Codec在游戏场景下的语音处理算法比传统即时通讯软件有更加优异的音质表现,并且在弱网环境下,以低码率保证了音质表现不受损害,确保在移动端得以应用。
腾讯游戏语音GVoice是Tencent Games CROS为游戏打造的语音解决方案。资料显示,目前GVoice服务已经覆盖全球超过200个国家和地区,日活跃用户超3亿,相关解决方案被应用于《和平精英》《英雄联盟手游》《天涯明月刀手游》等数千款游戏。GVoice AI Codec技术也将逐步拓展至其他游戏,提升语音交流流畅度,改善弱网环境下的用户体验。
据了解,GVoice AI Codec 通过自研编解码模型算法,传输带宽实现了压缩,并以 5-12kbps 的AI Codec替换了原来24kbps的Opus,用户在主观听觉上的体验没有明显差别。这意味着,GVoice AI Codec在保证音效质量的同时,传输码率更低,流量也更少。
在算力消耗方面,GVoice AI Codec需要将这一运算复杂度与资源占用极高的编解码方式,通过模型压缩、量化、并行运算、移动端指令集适配等工程化措施,不断降低运算与资源开销,达到移动端落地要求。数据显示,GVoice AI Codec在手机OnePlus 3双工通话下测试,相比Opus格式 CPU占用率资源增长约为2.3%;在iPhone 6s下测试,采用GVoice AI Codec后CPU占用率增长约1.3%。这表明,GVoice AI Codec用极低的CPU使用率增幅,换来了手机端更低流量的高质量实时通话。
(左图为原始语音,右图为GVoice AI Codec 编解码后语音,从波形上看右图语音保真度高,主观听感接近原始语音)
GVoice AI Codec技术在《和平精英》中应用后,语音服务质量整体得到了进一步的提升。首先,通过对语音流量的优化,GVoice AI Codec能够极大的提升玩家在交通出行、户外活动等弱网环境下的语音流畅性,避免在激烈战斗时出现卡麦、断麦的情况。其次,GVoice AI Codec由于使用AI模型算法,相比传统的语音算法在人声传输方面会有所提升,在《和平精英》中玩家间的语音沟通效果会更加清晰,无论是战术配合还是多人闲聊都有更佳的社交体验。项目组通过在不同嘈杂环境、多种游戏情景下进行了多轮语音测试,结果显示均获得了更良好的玩家反馈。
从游戏发展的角度而言,GVoice AI Codec在《和平精英》上的成功落地,为更多游戏语音技术的研发成果落地打下了基础,使得相关技术拓展至更多游戏成为可能。
无社交,不游戏。可以预见的是,随着云游戏、VR/AR等更多游戏品类的萌发,GVoice AI Codec 技术也将在更多品类的游戏体验方面起到越来越大的作用,成为新的行业标准。
《和平精英》用数字场景,连接社会多元价值
2023年2月12日,“2022年度中国游戏产业年会”正式开幕。在这次会议的“游戏责任论坛”上,《和平精英》项目负责人及腾讯互娱光子S工作室总经理高丽娜进行了主题演讲,并和在场嘉
2023-02-16和平精英雨林蛇岛在哪里(和平精英雨林蛇岛位置分享)
在和平精英游戏中,有些地方比较隐蔽,多数玩家知之甚少,蛇岛就是其中之一,那么和平精英雨林蛇岛在哪里?对此感兴趣的话,下面就跟小编一起来看看和平精英雨林蛇岛位置分享吧。和平精英蛇形岛怎么去1、点开地图选择雨林;2、标记蛇形岛位置,大约在河静西北方向2750m左右;3、按照标记的路线降落,如果太远可以选择早点开降落伞。以上和平精英雨林蛇岛位置解析就是此次小编整理的全部内容了,希望能帮到各位小伙伴,超多
2023-08-03和平精英点哪里打排位赛(和平精英排位赛在什么地方)
和平精英是没有排位赛的,游戏中有三种模式分别是:单人模式、双人模式和四人模式,游戏中的每局游戏都是排位赛,这三个模式的段位都是独立存在的,如果玩家在单人模式是皇冠的话在多
2022-04-15和平精英涂山之恋降落伞怎么获得(和平精英涂山之恋降落伞获得方法)
和平精英涂山之恋降落伞属于和狐妖小红娘联名定制的,将于本月下旬上线,许多玩家想知道具体怎么获得,今天小编就给大家带来和平精英涂山之恋降落伞获得方法。和平精英涂山之恋降落伞怎么获得1、上线时间:11月22日-12月5日。2、获取方法:玩家登录游戏进行签到,累计达到四次就能免费领取。3、玩家除了每天登录签到,还能邀请好友帮助,邀请三位好友一天就能拿到。4、该款降落伞属于是狐妖小红娘的联名定制款,整体
2023-11-24好听的游戏名字女生简约(和平精英简约大方的女生游戏名字)
游戏吸引的人群是不分年龄段的,每个年龄段的人都可以玩,也都会有上瘾的可能性。小编在这里提醒大家,适度游戏有益健康。大多数女生在接触游戏的时候,都会很注重自己的游戏名字,下面小编将带来女生好听的简约游戏名字大全,一起来看看吧!
2019-09-29和平精英3周年基地怎么跳最高点(和平精英3周年基地必学点位爆料)
在之前的新版本教学攻略中,鸡仔注意到了留言区里一位特种兵分享的空投基地战术。这位特种兵的想法非常不错,但是这个路线会不会不安全呢?鸡仔今天给大家安排一期超好用的3周年
2022-04-27和平精英广州文旅重磅联动正式官宣(让我们相聚于这数字城市盛会之中)
在海岛地图中登广州塔,云赏2022广州国际灯光节,在《和平精英》游戏中,一场现实与虚拟联动的 "穿粤云旅游“体验即将开启!作为自由开放的游戏世界,《和平精英》在广州市文化广电旅
2022-12-23吃鸡模式开启,青鱼归来,钓鱼大对决再现精彩博弈
一直以来《钓鱼大对决》都以独家的钓鱼内容和特色为主题,为我们玩家带来了许多与众不同的赛事和玩法。最出名的大概就是游戏之中的钓鱼吃鸡玩法了,多个玩家通过不断地角逐最终
2023-02-16和平精英重型雪地摩托图鉴
在和平精英中有各种各样的载具,其中重型雪地摩托怎么样?重型雪地摩托是雪地地图中的专属载具和轻型雪地摩托相比耐久更强但也失去一些灵活性。接下来给大家带来了和平精英重型雪地摩托图鉴分享,感兴趣的一起看看吧! 和平精英重型雪地摩托图鉴重型雪地摩托可承载人数:2人最高时速:110km/h适应性:强耐久度:中获取方式:雪地地图中随机刷新推荐指数:三颗星
2023-07-14和平精英创乐园怎么拿下 和平精英创乐园打法
和平精英创乐园怎么拿下?在和平精英游戏中,创乐园作为特色场景,很多玩家都不清楚创乐园的落点在哪里比较好,对此有疑问的小伙伴,下面就跟小编一起来看看和平精英创乐园打法吧。和
2022-07-18