2021年底,《和平精英》團隊攜手騰訊AI Lab、CROS游戲語音GVoice團隊一起正式立項GVoice AI Codec研發(fā)項目,基于騰訊音頻與語音處理Oteam在語音編解碼方向的技術積累,新項目著力實現高質量、低碼率和低功耗的游戲內實時語音環(huán)境。通過針對游戲場景進行深度優(yōu)化,GVoice AI Codec在游戲場景下的語音處理算法比傳統即時通訊軟件有更加優(yōu)異的音質表現,并且在弱網環(huán)境下,以低碼率保證了音質表現不受損害,確保在移動端得以應用。
騰訊游戲語音GVoice是Tencent Games CROS為游戲打造的語音解決方案。資料顯示,目前GVoice服務已經覆蓋全球超過200個國家和地區(qū),日活躍用戶超3億,相關解決方案被應用于《和平精英》《英雄聯盟手游》《天涯明月刀手游》等數千款游戲。GVoice AI Codec技術也將逐步拓展至其他游戲,提升語音交流流暢度,改善弱網環(huán)境下的用戶體驗。
據了解,GVoice AI Codec 通過自研編解碼模型算法,傳輸帶寬實現了壓縮,并以 5-12kbps 的AI Codec替換了原來24kbps的Opus,用戶在主觀聽覺上的體驗沒有明顯差別。這意味著,GVoice AI Codec在保證音效質量的同時,傳輸碼率更低,流量也更少。
在算力消耗方面,GVoice AI Codec需要將這一運算復雜度與資源占用極高的編解碼方式,通過模型壓縮、量化、并行運算、移動端指令集適配等工程化措施,不斷降低運算與資源開銷,達到移動端落地要求。數據顯示,GVoice AI Codec在手機OnePlus 3雙工通話下測試,相比Opus格式 CPU占用率資源增長約為2.3%;在iPhone 6s下測試,采用GVoice AI Codec后CPU占用率增長約1.3%。這表明,GVoice AI Codec用極低的CPU使用率增幅,換來了手機端更低流量的高質量實時通話。
(左圖為原始語音,右圖為GVoice AI Codec 編解碼后語音,從波形上看右圖語音保真度高,主觀聽感接近原始語音)
GVoice AI Codec技術在《和平精英》中應用后,語音服務質量整體得到了進一步的提升。首先,通過對語音流量的優(yōu)化,GVoice AI Codec能夠極大的提升玩家在交通出行、戶外活動等弱網環(huán)境下的語音流暢性,避免在激烈戰(zhàn)斗時出現卡麥、斷麥的情況。其次,GVoice AI Codec由于使用AI模型算法,相比傳統的語音算法在人聲傳輸方面會有所提升,在《和平精英》中玩家間的語音溝通效果會更加清晰,無論是戰(zhàn)術配合還是多人閑聊都有更佳的社交體驗。項目組通過在不同嘈雜環(huán)境、多種游戲情景下進行了多輪語音測試,結果顯示均獲得了更良好的玩家反饋。
從游戲發(fā)展的角度而言,GVoice AI Codec在《和平精英》上的成功落地,為更多游戲語音技術的研發(fā)成果落地打下了基礎,使得相關技術拓展至更多游戲成為可能。
無社交,不游戲。可以預見的是,隨著云游戲、VR/AR等更多游戲品類的萌發(fā),GVoice AI Codec 技術也將在更多品類的游戲體驗方面起到越來越大的作用,成為新的行業(yè)標準。
更新時間:2022-09-19 14:21
作者:匿名
你有沒有試過這樣的場景:當你“開黑”正酣,指揮著隊友有條不紊朝“敵人”后方挺進,突然語音掉線,因為聯系不到隊友而陷入孤立無援之境,進而痛失好局,不得不咽下失利的苦果……
隨著移動端游戲產品的爆發(fā),讓游戲內的語音交流成為天南海北的玩家社交的剛需,也成為定義“高品質游戲”的重要因素之一,游戲內語音交互已經成為近年來眾多游戲廠商的關注重點。
近日,騰訊游戲發(fā)布了最新游戲語音技術方案,騰訊游戲光子S工作室《和平精英》團隊攜手騰訊AI Lab、騰訊游戲CROS GVoice(騰訊游戲語音)團隊,基于深度學習在語音編解碼器上的不斷突破,將AI Codec應用于《和平精英》游戲中,在行業(yè)內率先實現AI Codec 更低碼率更高質量的語音編碼,由此成為首個將AI Codec技術全面應用于游戲語音領域的產品。
《和平精英》下載地址分享:{點擊下載}
弱網環(huán)境下的語音交流成“開黑”痛點
此前艾媒咨詢對移動游戲社交相關數據的統計表明,近 40% 的玩家因為社交因素選擇一款游戲;15.6% 的玩家因為一款游戲社交性差而選擇離開。因此,提高游戲的社交屬性已成為各大游戲廠商的重要工作。
作為減少玩家“孤軍奮戰(zhàn)”感受的有效手段,游戲語音自誕生起就深受玩家喜愛,并且在手游時代,玩家們對移動手機端的游戲語音傳輸的質量、延遲時間和使用環(huán)境,提出了越來越高的要求。
事實上,實時語音通信技術在行業(yè)內早已不是一個新話題,但游戲內實時語音交流不僅僅是簡單地實現實時通話即可。一個“好”的語音,最重要的是聽感質量符合人的聽覺要求,在這個前提下,傳輸碼率越低,用戶耗費的流量就越少;占用算力越少,CPU的能耗就越少。
發(fā)展至今,游戲語音傳輸技術在兩個方面尋找突破。
首先是在弱網惡劣環(huán)境下,如何確保語音交流流暢是游戲語音技術面臨的一個重要課題。同樣的聽感質量,如果語音信息的碼率越低,其傳輸的連貫性就越有保障,換言之,低碼率更適用于弱網環(huán)境。
其次,算力的損耗也是游戲語音要考慮的因素。由于重度游戲對CPU算力要求較高,因此,如何讓語音功能盡可能的減少對CPU的占用,在保障用戶的交流體驗的同時,不對游戲操作和計算資源進行過多的擠壓,成為其中的重點。
人工智能為游戲語音加上“BUFF”
當語音開黑、游戲社交成為剛需,眾多國內外的科技企業(yè)也開始涉足這一領域。
在確保語音質量的前提下,傳統的音頻解碼技術Codec致力于使用較少的網絡帶寬資源、較低的傳輸碼率去傳遞更保真的語音信息。隨著深度學習技術的發(fā)展,完全基于神經網絡的語音編碼器逐漸替代了傳統的基于信號處理的方法,成為了業(yè)內前沿的解決方案。在此基礎上,基于人工智能技術進化的AI Codec也越來越受到業(yè)界的關注。
為了給游戲內語音交互加上人工智能的“BUFF”,游戲界也進行了諸多嘗試。例如,業(yè)界常用的Opus聲音編碼格式在低碼率語音信息傳輸方面表現不如人意。2019年,行業(yè)涌現了一些超低碼率 AI Codec,能夠以極低碼率對語音進行壓縮,但是還原出的語音質量不太理想。
Google同樣將目光瞄準了這一領域。2021年初,Google發(fā)布了基于自回歸網絡的AI Codec Lyra。Lyra能夠在以低碼率傳輸的同時保證聲音效果,但不能提供高質量的實時通信,算法存在延遲的情況。 半年后,Google再次發(fā)布了新的AI Codec模型SoundStream,相比于Lyra,SoundStream在語音傳輸質量方面有所提升,但由于模型復雜度較高,無法在大多數的手機上平穩(wěn)運行。
首個游戲移動端AI Codec語音技術落地《和平精英》
與此同時,針對游戲內語音交互,國內廠商也在積極探索更好的解決方案。
作為國內頭部戰(zhàn)術競技手游,《和平精英》一直致力于提升游戲品質優(yōu)化玩家游戲體驗。 其中游戲語音因為應用場景眾多,使用率極高,語音品質的優(yōu)劣對游戲核心體驗有著至關重要的影響,一直都是《和平精英》團隊最關注的功能。
2021年底,《和平精英》團隊攜手騰訊AI Lab、CROS游戲語音GVoice團隊一起正式立項GVoice AI Codec研發(fā)項目,基于騰訊音頻與語音處理Oteam在語音編解碼方向的技術積累,新項目著力實現高質量、低碼率和低功耗的游戲內實時語音環(huán)境。通過針對游戲場景進行深度優(yōu)化,GVoice AI Codec在游戲場景下的語音處理算法比傳統即時通訊軟件有更加優(yōu)異的音質表現,并且在弱網環(huán)境下,以低碼率保證了音質表現不受損害,確保在移動端得以應用。
騰訊游戲語音GVoice是Tencent Games CROS為游戲打造的語音解決方案。資料顯示,目前GVoice服務已經覆蓋全球超過200個國家和地區(qū),日活躍用戶超3億,相關解決方案被應用于《和平精英》《英雄聯盟手游》《天涯明月刀手游》等數千款游戲。GVoice AI Codec技術也將逐步拓展至其他游戲,提升語音交流流暢度,改善弱網環(huán)境下的用戶體驗。
據了解,GVoice AI Codec 通過自研編解碼模型算法,傳輸帶寬實現了壓縮,并以 5-12kbps 的AI Codec替換了原來24kbps的Opus,用戶在主觀聽覺上的體驗沒有明顯差別。這意味著,GVoice AI Codec在保證音效質量的同時,傳輸碼率更低,流量也更少。
在算力消耗方面,GVoice AI Codec需要將這一運算復雜度與資源占用極高的編解碼方式,通過模型壓縮、量化、并行運算、移動端指令集適配等工程化措施,不斷降低運算與資源開銷,達到移動端落地要求。數據顯示,GVoice AI Codec在手機OnePlus 3雙工通話下測試,相比Opus格式 CPU占用率資源增長約為2.3%;在iPhone 6s下測試,采用GVoice AI Codec后CPU占用率增長約1.3%。這表明,GVoice AI Codec用極低的CPU使用率增幅,換來了手機端更低流量的高質量實時通話。
(左圖為原始語音,右圖為GVoice AI Codec 編解碼后語音,從波形上看右圖語音保真度高,主觀聽感接近原始語音)
GVoice AI Codec技術在《和平精英》中應用后,語音服務質量整體得到了進一步的提升。首先,通過對語音流量的優(yōu)化,GVoice AI Codec能夠極大的提升玩家在交通出行、戶外活動等弱網環(huán)境下的語音流暢性,避免在激烈戰(zhàn)斗時出現卡麥、斷麥的情況。其次,GVoice AI Codec由于使用AI模型算法,相比傳統的語音算法在人聲傳輸方面會有所提升,在《和平精英》中玩家間的語音溝通效果會更加清晰,無論是戰(zhàn)術配合還是多人閑聊都有更佳的社交體驗。項目組通過在不同嘈雜環(huán)境、多種游戲情景下進行了多輪語音測試,結果顯示均獲得了更良好的玩家反饋。
從游戲發(fā)展的角度而言,GVoice AI Codec在《和平精英》上的成功落地,為更多游戲語音技術的研發(fā)成果落地打下了基礎,使得相關技術拓展至更多游戲成為可能。
無社交,不游戲。可以預見的是,隨著云游戲、VR/AR等更多游戲品類的萌發(fā),GVoice AI Codec 技術也將在更多品類的游戲體驗方面起到越來越大的作用,成為新的行業(yè)標準。
相關資訊
《和平精英》綠洲世界即將開啟 共建開放世界冒險新可能
《和平精英》即將推出開放世界玩法“綠洲世界”,可賽車、釣魚、旅游……
攜手御劍!《和平精英》聯動《仙劍奇?zhèn)b傳》開啟海島心動愛情冒險!
《和平精英》再度攜手瑪拉莎蒂,新車友新車型大年三十「瑪」上出發(fā)
《和平精英》再度攜手瑪拉莎蒂 新車友新車型大年三十「瑪」上出發(fā)
聯名永動機《和平精英》再出擊!跨界SIXSTAR六星邀你一起戰(zhàn)術增肌
《和平精英》航天光影大賞限時上線,點亮海島夜空致敬中國航天!
將我空投向宇宙,《和平精英》聯合中國航天神舟傳媒開啟“太空之旅”
GVoice AI Codec語音技術落地《和平精英》,實現手游端“超音速”游戲語音體驗
手游資訊2022-09-19 14:21
《和平精英》再度攜手大師貼膜!炫彩車膜為精英座駕加持增色
手游資訊2022-09-01 17:17
上頭開麥,唱響夏決戰(zhàn)歌!《和平精英》x全民K歌 PEL夏決翻唱助威活動火熱進行中
手游資訊2022-08-16 18:03
《和平精英》品牌代言人宋茜亮相!勝利女神驚喜助力2022空投節(jié)
手游資訊2022-07-28 16:23
你的前方,有我空投《和平精英》攜手YSL圣羅蘭美妝出「空投紅」七夕限定禮盒
手游資訊2022-07-22 16:20
《和平精英》攜手路特斯聯動!Eletre亮相海島落地生風
手游資訊2022-07-08 13:47
玩風了,特種兵!《和平精英》攜手路特斯跨界聯動倒掛貼地飛行
手游資訊2022-06-27 18:34
《和平精英》追夢逐光軍需時裝圖鑒一覽
手游資訊2022-06-24 18:25
類型 :飛行射擊
大小 :1.71GB
老爹奶茶店
云逆水寒
后室公司
太空沙盒
朝圣者
晾曬時光
我是咸魚
劍與騎士團
哈基逃亡2
愚錄DEMO
沖關小隊
熄燈睡覺
最新文章
《明日方舟》推出全新故事集「春分」!宣布參加臺北國際電玩展
《黑色沙漠MOBILE》開放最高等級“空虛飾品”覺醒!「混沌的龜裂」入場費用同步調降
以水墨演繹千古華韻,《天下》手游武俠風新時裝讓你化身人間驚鴻客!
網易《逆水寒》端手游活躍用戶總數突破1億
影音播放
影音播放
資訊閱讀
影音播放
健康醫(yī)療
資訊閱讀
影音播放
網絡工具
網絡購物
生活服務
經營策略
動作冒險
休閑益智
休閑益智
體育競速
動作冒險
休閑益智
飛行射擊
飛行射擊
休閑益智