騰訊游戲語音GVoice攜手vivo利用第五代高通AI引擎率先推出游戲語音處理技術

合作簽約儀式現場

近年來，實時互動游戲經歷著前所未有的快速發展，越來越多玩家在游戲時需要團隊作戰，位于不同地點的玩家對實時傳輸語音質量的要求日漸提高。流暢無卡頓、且玩法豐富的游戲語音溝通逐漸成為游戲長久運營的必要條件。不同于傳統IM軟件，手游場景下的語音通話對“降能提效”有更高的要求：

（1）使用傳統IM軟件的用戶一般會選擇較為安靜的環境通話。而玩家在游戲時很可能身處嘈雜環境，因此手游語音通話面臨著來自外界噪音、游戲內背景音樂及音效的降噪挑戰。

（2）一般情況下，手機上的語音算法往往會運行在手機的CPU上，這樣會大量消耗CPU內存等處理計算資源。而游戲本身已經占用大量計算資源，此時需要游戲語音利用最小的性能消耗，實現最佳的語音體驗。

為滿足游戲每日海量的對局交流，降低性能消耗的同時進一步提升玩家的語音體驗，騰訊游戲語音GVoice聯合全球智能手機品牌vivo、高通公司展開深層次技術優化，利用第五代高通AI引擎聯合推出游戲語音處理技術，旨在從源頭提升語音體驗。

11月2日，騰訊互娛研發效能部副總經理李從兵，及vivo軟件平臺部總經理楊進寧于深圳市舉行了游戲語音技術合作簽約儀式。此次簽約標志著雙方將在游戲語音領域展開深度合作。現階段在降噪去雜優化、性能消耗優化等方面已有一定的成果，后續雙方將在回聲消除、聲紋識別等方面持續開展合作。

（1）降噪去雜優化

GVoice算法針對游戲場景進行深度優化，在游戲場景下比傳統IM軟件的語音處理算法有更加優異的音質表現。傳統IM軟件（VOIP）算法的平均雜音時長比例為11.5%，而GVoice的平均雜音時長比例為3.4%。利用高通AI引擎上的高通Hexagon? DSP運行GVoice算法后，降噪效果更加明顯。

圖一：GVoice & VOIP雜音時常比例對比

圖二：未處理語音波形圖

圖三：GVoice優化后波形圖

通過對GVoice topology位置的移動，vivo深度優化運行在高通AI引擎上Hexagon處理器里面的GVoice參數，以針對游戲場景取得更佳效果，如下圖所示的某場景下：對比于傳統的算法(左通道)，vivo和騰訊游戲GVoice合作的騰訊游戲語聊定制優化通路(右通道)在語音還原(青色框內)和噪聲壓制(黃色框內)的表現上面都有提升，其降噪效果在部分場景可以提升10dB左右；

圖四：vivo深度優化算法在噪聲環境下，語音還原

（2）發送語音效果優化

在玩游戲的時候，游戲的背景音效也是提升游戲體驗的一種方式；同樣的，隊友之間的語音互動顯得非常重要；傳統將算法運行在CPU上面，手機端為了獲取更好游戲背景音效，不得不犧牲部分場景下的發送語音效果，導致隊友之間的聊天有時變得斷續；GVoice的應用使手機端和游戲端的算法完全綁定，vivo仍然可以通過深度優化運行在高通AI引擎Hexagon處理器里面的語音算法參數，得到更好的語音聊天效果。

下圖左通道表示傳統算法的語音通話效果，右通道表示vivo和騰訊GVoice合作的騰訊游戲語聊定制優化通路，通過左右通道對比可以明顯看出：不管本地游戲背景音效是否打開，vivo深度優化算法均可獲得良好的語音聊天效果，其出現通話斷續的概率遠遠低于傳統算法(青色框內)，而且對于隊友之間的語音清晰，也不會出現一些非預期的效果(黃色框內)；

圖五：vivo深度優化算法在開發本地背景音效時的上行語聊

（3）性能消耗優化

開啟游戲及GVoice語音后，GVoice中的降噪算法不再運行在CPU上，而是運行在高通AI引擎的Hexagon處理器上，整機耗電量下降20mA/s，GVoice所占的CPU資源在原有基礎上減少約30%。

基于在游戲語音技術領域的探索與嘗試，此次合作將加快游戲語音算法核心技術領域的研發成果落地于商用產品的步伐，賦能越來越多的游戲開發者，確保億萬玩家在移動平臺上早日獲得更優的游戲體驗，同時也歡迎其他優秀廠商與我們合作探索更多技術可能。

雷鋒網雷鋒網