你有沒有試過這樣的場景：當你“開黑”正酣，指揮著隊友有條不紊朝“敵人”后方挺進，突然語音掉線，因為聯系不到隊友而陷入孤立無援之境，進而痛失好局，不得不咽下失利的苦果…… 隨著移動端游戲產品的爆發，讓游戲內的語音交流成為天南海北的玩家社交的剛需，也成為定義“高品質游戲”的重要因素之一，游戲內語音交互已經成為近年來眾多游戲廠商的關注重點。 近日，騰訊游戲發布了最新游戲語音技術方案，騰訊游戲光子S工作室《和平精英》團隊攜手騰訊AI Lab、騰訊游戲CROS GVoice（騰訊游戲語音）團隊，基于深度學習在語音編解碼器上的不斷突破，將AI Codec應用于《和平精英》游戲中，在行業內率先實現AI Codec 更低碼率更高質量的語音編碼，由此成為首個將AI Codec技術全面應用于游戲語音領域的產品。 
弱網環境下的語音交流成“開黑”痛點 此前艾媒咨詢對移動游戲社交相關數據的統計表明，近 40% 的玩家因為社交因素選擇一款游戲；15.6% 的玩家因為一款游戲社交性差而選擇離開。因此，提高游戲的社交屬性已成為各大游戲廠商的重要工作。 作為減少玩家“孤軍奮戰”感受的有效手段，游戲語音自誕生起就深受玩家喜愛，并且在手游時代，玩家們對移動手機端的游戲語音傳輸的質量、延遲時間和使用環境，提出了越來越高的要求。 
事實上，實時語音通信技術在行業內早已不是一個新話題，但游戲內實時語音交流不僅僅是簡單地實現實時通話即可。一個“好”的語音，最重要的是聽感質量符合人的聽覺要求，在這個前提下，傳輸碼率越低，用戶耗費的流量就越少；占用算力越少，CPU的能耗就越少。 發展至今，游戲語音傳輸技術在兩個方面尋找突破。 首先是在弱網惡劣環境下，如何確保語音交流流暢是游戲語音技術面臨的一個重要課題。同樣的聽感質量，如果語音信息的碼率越低，其傳輸的連貫性就越有保障，換言之，低碼率更適用于弱網環境。 其次，算力的損耗也是游戲語音要考慮的因素。由于重度游戲對CPU算力要求較高，因此，如何讓語音功能盡可能的減少對CPU的占用，在保障用戶的交流體驗的同時，不對游戲操作和計算資源進行過多的擠壓，成為其中的重點。 人工智能為游戲語音加上“BUFF” 當語音開黑、游戲社交成為剛需，眾多國內外的科技企業也開始涉足這一領域。 在確保語音質量的前提下，傳統的音頻解碼技術Codec致力于使用較少的網絡帶寬資源、較低的傳輸碼率去傳遞更保真的語音信息。隨著深度學習技術的發展，完全基于神經網絡的語音編碼器逐漸替代了傳統的基于信號處理的方法，成為了業內前沿的解決方案。在此基礎上，基于人工智能技術進化的AI Codec也越來越受到業界的關注。 為了給游戲內語音交互加上人工智能的“BUFF”，游戲界也進行了諸多嘗試。例如，業界常用的Opus聲音編碼格式在低碼率語音信息傳輸方面表現不如人意。2019年，行業涌現了一些超低碼率 AI Codec，能夠以極低碼率對語音進行壓縮，但是還原出的語音質量不太理想。 Google同樣將目光瞄準了這一領域。2021年初，Google發布了基于自回歸網絡的AI Codec Lyra。Lyra能夠在以低碼率傳輸的同時保證聲音效果，但不能提供高質量的實時通信，算法存在延遲的情況。 半年后，Google再次發布了新的AI Codec模型SoundStream，相比于Lyra，SoundStream在語音傳輸質量方面有所提升，但由于模型復雜度較高，無法在大多數的手機上平穩運行。 首個游戲移動端AI Codec語音技術落地《和平精英》 與此同時，針對游戲內語音交互，國內廠商也在積極探索更好的解決方案。 作為國內頭部戰術競技手游，《和平精英》一直致力于提升游戲品質優化玩家游戲體驗。 其中游戲語音因為應用場景眾多，使用率極高，語音品質的優劣對游戲核心體驗有著至關重要的影響，一直都是《和平精英》團隊最關注的功能。 2021年底，《和平精英》團隊攜手騰訊AI Lab、CROS游戲語音GVoice團隊一起正式立項GVoice AI Codec研發項目，基于騰訊音頻與語音處理Oteam在語音編解碼方向的技術積累，新項目著力實現高質量、低碼率和低功耗的游戲內實時語音環境。通過針對游戲場景進行深度優化，GVoice AI Codec在游戲場景下的語音處理算法比傳統即時通訊軟件有更加優異的音質表現，并且在弱網環境下，以低碼率保證了音質表現不受損害，確保在移動端得以應用。 
騰訊游戲語音GVoice是Tencent Games CROS為游戲打造的語音解決方案。資料顯示，目前GVoice服務已經覆蓋全球超過200個國家和地區，日活躍用戶超3億，相關解決方案被應用于《和平精英》《英雄聯盟手游》《天涯明月刀手游》等數千款游戲。GVoice AI Codec技術也將逐步拓展至其他游戲，提升語音交流流暢度，改善弱網環境下的用戶體驗。 
據了解，GVoice AI Codec 通過自研編解碼模型算法，傳輸帶寬實現了壓縮，并以 5-12kbps 的AI Codec替換了原來的Opus，用戶在主觀聽覺上的體驗沒有明顯差別。這意味著，GVoice AI Codec在保證音效質量的同時，傳輸碼率更低，流量也更少。 在算力消耗方面，GVoice AI Codec需要將這一運算復雜度與資源占用極高的編解碼方式，通過模型壓縮、量化、并行運算、移動端指令集適配等工程化措施，不斷降低運算與資源開銷，達到移動端落地要求。數據顯示，GVoice AI Codec在手機OnePlus 3雙工通話下測試，相比Opus格式 CPU占用率資源增長約為2.3%；在iPhone 6s下測試，采用GVoice AI Codec后CPU占用率增長約1.3%。這表明，GVoice AI Codec用極低的CPU使用率增幅，換來了手機端更低流量的高質量實時通話。 
（左圖為原始語音，右圖為GVoice AI Codec 編解碼后語音，從波形上看右圖語音保真度高，主觀聽感接近原始語音） GVoice AI Codec技術在《和平精英》中應用后，語音服務質量整體得到了進一步的提升。首先，通過對語音流量的優化，GVoice AI Codec能夠極大的提升玩家在交通出行、戶外活動等弱網環境下的語音流暢性，避免在激烈戰斗時出現卡麥、斷麥的情況。其次，GVoice AI Codec由于使用AI模型算法，相比傳統的語音算法在人聲傳輸方面會有所提升，在《和平精英》中玩家間的語音溝通效果會更加清晰，無論是戰術配合還是多人閑聊都有更佳的社交體驗。項目組通過在不同嘈雜環境、多種游戲情景下進行了多輪語音測試，結果顯示均獲得了更良好的玩家反饋。 從游戲發展的角度而言，GVoice AI Codec在《和平精英》上的成功落地，為更多游戲語音技術的研發成果落地打下了基礎，使得相關技術拓展至更多游戲成為可能。 無社交，不游戲?？梢灶A見的是，隨著云游戲、VR/AR等更多游戲品類的萌發，GVoice AI Codec 技術也將在更多品類的游戲體驗方面起到越來越大的作用，成為新的行業標準。
[正文結束] |
