落地《星球：重啓》，朝夕光年AIGC進展超出了我們的想象_風聞

　　創造一個更生動的遊戲世界

　　隨着GDC日程逐漸深入，那些潛水的遊戲公司AIGC新進展逐漸浮出水面。

　　當地時間3月20日至24日，GDC 2023（Game Developers Conference 全球遊戲開發者大會）於舊金山正式開辦。作為全球最具影響力的遊戲行業峯會，也是全球最大的遊戲開發者聚集地。GDC為遊戲開發人員提供一個交流、學習和展示遊戲技術的場所。

　　與此同時，隨着近期OpenAI ChatGPT、微軟New Bing、百度文心一言以及谷歌Bard等產品推出，AIGC浪潮逐漸席捲遊戲領域。從GDC 2023議程來看，本次大會除了交流美術、敍事、玩法、音頻等遊戲設計思路，以及遊戲工業化、商業模式等外，AI在遊戲中的應用成為行業關注重點。

　　聚焦登上GDC 2023舞台的國內廠商，騰訊、網易圍繞機器學習、下一代移動遊戲開發技術、引擎研發和創新工具等，將帶來約26場遊戲相關主題演講。

　　值得提出的是，除了兩大傳統遊戲巨頭外，本次GDC上也出現了另外一位遊戲“新星”的身影——字節跳動旗下游戲品牌朝夕光年。

　　美國舊金山時間3月21日9:30-10:30，在GDC 2023西廳2010室，朝夕光年旗下江南工作室AI技術負責人四道以《Machine Learning Summit: GPT-3 Powered Text to Lifelike Speech and Animation for NPCs》（機器學習峯會：基於GPT-3的擬真NPC語音和動畫生成）為主題，結合公司自研遊戲《星球：重啓》，分享了AI技術在遊戲場景中的落地應用。

　　將AI從虛擬偶像“搬入”遊戲

　　四道的分享主要圍繞七大模塊展開：文本分析模塊；情緒控制語音合成；深度神經網絡；節奏分析模塊；語義動作模板；運動匹配模塊；運動節奏自適應模塊。

　　基於這些模塊，朝夕光年江南工作室打造了一個AI系統，可以構建一個逼真的實時交互數字人。

　　據瞭解，江南工作室打造這一AI模型已有兩年多時間。最早是在A-SOUL這類虛擬偶像產品中進行嘗試，後逐漸應用到數字人、遊戲場景中。

　　例如在江南工作室自主研發的科幻生存遊戲《星球：重啓》內，智能NPC李星瀾（22世紀記錄世界信息和玩家數據的智能終端）的交互語音和動作，便是由這套AI訓練模型驅動生成。

　　坦白説，智能NPC和數字人在娛樂行業和社交媒體平台不算新鮮事物。包括NExT Studios打造的數字航天員小諍、米哈遊鹿鳴，以及人AI驅動的主持人、評論員、網紅等，逐漸面向大眾。

　　但不論在過去、現在，甚至是未來，行業內對虛擬人的關注點，不僅在於外形、動作、聲音的擬真度，更在於“她”實時交互的語言、動作是由AI驅動還是存在“中之人”。

　　從內測1.0版本開始，《星球：重啓》就已接入江南AI的文本生成模型。目前該作已經在港澳台開啓公測，遊戲智能NPC相關內容或許都是由AIGC生成。從遊戲的開放大世界體驗來看，在線智能NPC或許早已突破百位。

　　基於當前技術水平，《星球：重啓》的智能NPC劇情資源或許並非實時生成而是離線模式。簡單來説，遊戲中的智能NPC暫不具備實時交互的能力。不過，在數字人Lydia身上，實時交互AI技術得到了更多應用。

　　此外從可控性的角度來看，在遊戲這一複雜場景中，離線相比實時生成更好控制。這也能夠避免智能NPC觸及一些ooc敏感問題。

　　如何讓智能NPC變得“合格”

　　隨着AIGC持續發展，或從多角度重塑遊戲行業。AI技術發展使得AIGC趨於成熟，也使得其部分落地成為可能。目前，包括AI繪畫輔助設計、AI配音降低人工風險，以及AI文本可以生成劇情、對白等都有着不錯的落地案例。

　　從階段發展來看，這類技術的推進預計在中短期會降低遊戲內容生產成本，中長期還將降低創作門檻，促進內容產業的供給繁榮。這或許也是朝夕光年江南工作室，進一步探索實時生成AI的重要原因。

　　從當前遊戲公司探索AIGC在遊戲中的應用來看，離線交互是現狀。但大家都致力於實時交互方向，或許朝夕光年也是如此。

　　而針對智能NPC實時交互內容會觸及ooc的問題。一位參與GDC 2023的遊戲開發商表示，通過前置記憶單元+最新的語言大模型+檢索優化模塊，可以很好地控制智能NPC的語音、文本內容。

　　但也有AI服務商表示，將AI融入到實際遊戲設計生產過程中，其實有很多不可控的地方。他舉例道，日本的遊戲研發注重遊戲理念、場景設計。如何才能讓AI生產契合這一理念和場景的內容？

　　對此有遊戲公司AI負責人表示，團隊做過很多類似的嘗試。他們會選擇在前置記憶單元中設計一個輸入框架（包括遊戲世界觀，人物的角色觀、世界觀、性格特色等），策劃通過這一定義好的框架資料體驗。然後再放到前置記憶模塊，加上ChatGPT進行測試。並且每一次對話的時候，都會把前置信息輸入進去。

　　簡單來説，智能NPC所進行的每一次交互都會受到約束，時刻告訴“她”自己到底是怎樣一個人。據悉，目前團隊對實際測試下來的效果還比較滿意。

　　可另一個問題是，這類AI模型需要投入大量訓練。從官方公佈的資料來看，“李星瀾”智能對話模塊的訓練語料（多語種）高達6TB；訓練時間，16張V100 5天19個小時，250000steps。此外，江南工作室自建了一個面向遊戲應用場景的高質量（姿勢、表情、動作等）數據庫。

　　如果在遊戲中加入這樣一個“懂自己”且能實時交互的智能NPC，是否會增加遊戲成本？這還有待落地相關AI技術的產品，在商業化層面做出進一步探索。但至少在現階段，我們還是先嚐試讓智能NPC變得“合格”。

　　字節跳動加速佈局AIGC

　　從現階段一些AI創業公司和遊戲廠商的探索成果來看，實時交互智能NPC落地遊戲場景，存在很大可行性。

　　在今年2月，網易《逆水寒》手遊通過AI技術，讓智能NPC可以做到“無設定自由交互”。NPC可與玩家自由對話，並基於對話內容自主給出有邏輯的行為反饋。

　　此外，超參數等AI創業公司，結合ChatGPT等AIGC技術，逐步探索新的bot場景。例如公司不久前發佈了《活的長安城》項目demo。它是一個自由度非常高的場景，類似包括了互動、產生內容的《西部世界》NPC生態。據瞭解，其目前可支持同時在線的智能NPC量級在千人。

　　隨着ChatGPT、AIGC走上風口，很多遊戲企業都在探索智能NPC對話、交互、自由生成劇情內容，以及將新的技術與bot進行融合等。從理論上這是可行的，邏輯也講得通。但真正要落地到實際遊戲場景中，這並非一個團隊一朝一夕的事。

　　聚焦字節跳動，近期公司在AIGC領域的動作逐漸頻繁。就在今日（3月22日），有消息稱阿里M6大模型原帶頭人楊紅霞已加入字節跳動AI Lab（人工智能實驗室），參與語言生成大模型的研發。

　　據瞭解，M6是一項通用性AI大模型，擁有多模態、多任務能力，尤其擅長設計、寫作、問答，在電商、製造業、文學藝術、科學研究等領域都具有廣泛應用前景。

　　此外，從字節跳動官方招聘信息來看，公司在北京、上海、杭州等地都有在招AI相關人才。其崗位涉及：AIGC技術專家、AI-Lab NLP自然語言處理算法工程師、AI-Lab語音合成研究科學家等。

　　或許待到《星球：重啓》登陸國服時，玩家就能在遊戲中與李星瀾進行實時互動，開啓不一樣的2112生存之旅。