AI顛覆遊戲研發運營，網易互娛AI Lab驚豔GDC 2021

近日，遊戲界的年度盛會GDC 2021於線上召開，網易互娛AI Lab在大會上向來自世界各地的數萬名開發者們分享了其在遊戲研發運營領域的兩項研究成果——“3D Parametric Face Model and its Applications in Games（三維引數化人頭模型及其在遊戲中的應用）”和“Game Environment Guardian（遊戲環境衛士）”。這兩項成果分別入選了GDC 2021 Summit和GDC 2021 Core，前者更是唯一入選本屆大會的3D人頭重建方向的提案，彰顯了網易互娛AI Lab在 AI與遊戲領域的綜合技術實力，也印證了其近年來在遊戲領域的技術探索和突破獲得了業界權威的認可。

三維引數化人臉模型：研製創新工具，提升美術效率

畫面是玩家對遊戲的第一印象，因此精美的遊戲畫面一直是各大遊戲廠商凸顯遊戲品質的競技場，其中角色面部表現更是該競技場上最能體現實力和拉開差距的環節。在精美的角色面部效果背後，暗藏著高質量模型、繫結、動畫等一系列面部美術資產，且隨著遊戲體量的迅速增長，為遊戲內每個角色都製作高質量的面部資產需要投入極高的成本。近年來三維引數化人臉模型（3DMM）快速發展，被廣泛應用於人臉重建、表情迴歸等問題。理論上，一套高質量的引數化人臉模型、配合相關AI和圖形演算法，可以極大提升遊戲角色面部資源的生產效率。

遺憾的是，當前業界主流的三維引數化人臉模型（如Basel Face Model、FLAME、Surrey Morphable Face Model等）都以學術應用為主，主要作為某種中間表徵為演算法提供關於人臉的三維形狀先驗資訊，在其引數空間中取樣出的人頭模型本身的質量（精度、完整度、佈線質量等）遠遠達不到遊戲行業的美術資源標準。為了解決這一問題，網易互娛AI Lab結合當前遊戲工業界的實際需求，通過高精度三維掃描裝置採集了涵蓋不同性別、不同年齡段的500個亞洲人頭資料，結合自研演算法和專業掃描建模流程對資料進行修復和重拓撲，從而構建了一套針對東亞人臉的、符合遊戲資源標準的高質量三維引數化人臉模型。該模型包含四個維度的引數空間：能夠生成不同形狀人頭的形狀引數空間、能夠調整區域性五官特徵的面部屬性引數空間、可以改變面部表情的表情引數空間，以及可以修改面部紋理和幾何細節的外觀引數化空間。

但讓AI深入遊戲的研發與製作，關鍵還在於AI技術的工具化。圍繞這套三維引數化人臉模型，針對不同的應用場景，網易互娛AI Lab打造了一系列用於提升面部資源生產效率的美術工具：

1．人頭重建：基於單視角或多視角照片生成高精度三維頭部模型，並且美術模型師還可以從形狀、表情、面部屬性和外觀四個維度對自動生成的模型進行二次編輯。利用該工具，傳統上需要7-20人/天的工作可以在1分鐘內快速完成。


2. 形狀/表情遷移：給定任意遊戲角色的頭部模型，既可以批量生成與該模型風格相近、臉型/五官存在一定變化的模型（形狀遷移），也可以批量生成該模型的各種表情Blendshape（表情遷移）。遊戲專案組只需要製作一個基礎人頭模型，就能以極低的成本快速實現千人千面的效果，有效避免大世界遊戲中NPC樣貌的千篇一律。


3. 面部表情捕捉：網易互娛AI Lab還打造了一套完全自研、全平臺單核單執行緒實時的輕量級面部表情捕捉套件，僅需一個普通攝像頭，就可以完成從真人到遊戲角色的表情精準遷移。該技術不僅能大幅提升面部動畫資源的製作效率，還可以為虛擬偶像直播和遊戲內玩法提供支援。


遊戲敏感資訊過濾與輿情平臺：打造和諧環境，賦能長線運營

遊戲內外，玩家社交將產生大量的資訊：一方面，遊戲內的聊天公屏、對局語音等交流渠道內，違禁資訊屢禁不止，這將給遊戲營收、口碑和玩家體驗造成難以估量的損失；另一方面，遊戲外的論壇、社群等交流平臺的內容是玩家反饋的一手資料，對於實時掌握遊戲輿情和危機預警而言具有重大價值。那麼，如何有效打擊敏感資訊，深入玩家群體，賦能長線運營？網易互娛AI Lab在大會上分享了其在違規資訊過濾和輿情分析方面的最新進展。

精準打擊遊戲內的敏感內容存在多重挑戰：這些資訊不僅覆蓋種類甚廣、形式多樣，還一直在不斷迭代變化，並且不同遊戲的用詞也存在著差異。過去，針對文字資訊一般採用的是關鍵詞識別，但這種方式難以應對變體、諧音等形式。網易互娛AI Lab基於機器學習的方法，採用卷積神經網路和BERT預訓練語言模型有效識別文字變體，並構建了一套半自動新詞挖掘系統，能夠隨著黑話的變化自動迭代。而針對語音形式的資訊，以往採用的是自動語音識別（ASR）技術，該技術需要將語音解碼後對文字進行分類，會耗費大量計算資源，實時性也較差。為了提升效率，網易互娛AI Lab以端到端模型在音素層面直接進行分類，該方法能在準確識別的同時大幅提高速度。此外，網易互娛AI Lab還可通過識別賬號異常行為排查灰黑產賬戶，幫助及時減少遊戲損失。目前，該系統已經成功應用於多款網易遊戲，日均請求次數超過2000萬，準確率超過95%。


敏感資訊的實時高效過濾幫助遊戲長線運營打造了更加和諧的遊戲環境，改善了玩家的遊戲體驗，而網易互娛AI Lab的輿情管理平臺則為遊戲運營提供了及時瞭解玩家的視覺化資料平臺，以便及時應對和防範輿情風險。該輿情平臺不僅能夠自動抓取遊戲內所有頻道和自營社群的內容，實現自動分類聚類，其情緒分析模組還可進行文字細粒度情感分析，辨別評論的正負面傾向。此外，系統還內建了輿情實時預警功能和熱點分析功能，能夠幫助遊戲工作室及時應對輿情風險、一鍵掌握熱點話題。目前，該輿情平臺已為20多款網易熱門遊戲提供支援。


網易互娛AI Lab成立於2017年，是遊戲行業領先的人工智慧實驗室，致力於計算機視覺、語音和自然語言處理，以及強化學習等技術在遊戲場景下的研究、應用和落地，實驗室旨在通過AI技術助力互娛旗下熱門遊戲及產品的技術升級。正如在本屆GDC大會上展示的一樣，網易互娛AI Lab近年來不斷探索學術的邊界，仰望星空亦腳踏實地，將AI成果落地於遊戲研發運營的各個環節，幫助解決業務痛點，提升製作效率。目前，其研發成果已經應用於《大話西遊》、《一夢江湖》、《第五人格》等多款網易熱門遊戲之中。未來，網易互娛AI Lab將繼續突破技術壁壘，為更多遊戲提供支援，助力遊戲產業革新。