一代又一代的人工智能技術正在徹底改變游戲的構思、制作和玩法。游戲開發人員正在探索這些技術在制作過程中如何影響 2D 和 3D 內容創作管道。部分興奮來自于在運行時創建游戲體驗的能力,而使用早期的解決方案是不可能的。
隨著游戲變得越來越復雜,不可玩角色( NPC )的創建也在不斷發展。預先錄制的臺詞數量增加了,玩家與 NPC 互動的選項數量也增加了,面部動畫也變得更加逼真。
然而,玩家與 NPC 的互動仍然傾向于交易性的、腳本化的和短暫的,因為對話選項很快就會耗盡,只會推動故事向前發展。現在,生成性人工智能可以通過提高 NPC 的會話技能、創造隨著時間的推移而進化的持久個性,以及實現玩家獨有的動態反應,使 NPC 變得更加智能。
在COMPUTEX 2023, NVIDIA 宣布了 NPC 的未來 – 面向于游戲的 NVIDIA Avatar Cloud Engine (ACE)。NVIDIA ACE for Games 是一項定制的人工智能模型鑄造服務,旨在通過人工智能驅動的自然語言交互將智能帶給 NPC ,從而改變游戲。
中間件、工具和游戲的開發人員可以使用 NVIDIA ACE for games 在軟件和游戲中構建和部署定制的語音、對話和動畫 AI 模型。
利用人工智能基礎模型的最新突破生成 NPC

優化后的 AI 基礎模型包括以下內容:
- NVIDIA NeMo:提供基礎語言模型和模型自定義工具,以便您可以進一步調整游戲角色的模型。根據需要,這些模型可以端到端集成,也可以任意組合。這種可定制的大型語言模型( LLM )支持適合游戲世界的特定角色背景故事和個性。
- NVIDIA Riva:提供自動語音識別( ASR )和文本轉語音( TTS )功能,以實現與 NVIDIA NeMo 的實時語音對話。
- NVIDIA Omniverse Audio2Face:僅從音頻源立即為游戲角色創建富有表現力的面部動畫。 Audio2Face 為虛幻引擎 5 提供了 Omniverse 連接器,因此您可以直接向 MetaHuman 角色添加面部動畫。
您可以通過 NeMo 模型對準技術為 NPC 帶來活力。首先,使用行為克隆使基本語言模型能夠根據指令執行角色扮演任務。為了進一步使 NPC 的行為與預期保持一致,在未來,您可以應用來自人類反饋的強化學習( RLHF )來在開發過程中接收設計師的實時反饋。
NPC 完全對齊后,最后一步是應用NeMo Guardrails,為 NPC 添加了可編程規則。該工具包可幫助您構建準確、適當、主題明確且安全的游戲角色。 NeMo Guardrails 本機支持 LangChain ,這是一個用于開發 LLM 驅動的應用程序的工具包。
NVIDIA 為各種規模的中間件、工具和游戲開發人員提供了靈活的部署方法。使 NVIDIA ACE 能夠用于游戲的神經網絡針對不同的功能進行了優化,具有不同的尺寸、性能和質量權衡。
ACE for Games 代工服務將幫助您微調游戲模型,然后通過 NVIDIA DGX Cloud 、 GeForce RTX PC 或內部部署進行實時推理。您還可以實時驗證模型的質量,測試性能和延遲,以確保它們在部署前符合特定標準。
為游戲創建端到端化身解決方案
為了展示如何利用 ACE for Games 構建 NPC , NVIDIA 與Convai,一家初創公司,正在構建一個在游戲和虛擬世界中創建和部署人工智能角色的平臺,以幫助優化 ACE 模塊并將其集成到其產品中
Convai 創始人兼首席執行官 Purnendu Mukherjee 表示:“有了 NVIDIA ACE for Games , Convai 的工具可以實現所需的延遲和質量,使幾乎每個開發者都能以經濟高效的方式使用人工智能不可玩的角色。”。
Convai 將 NVIDIA Riva 用于語音到文本和文本到語音功能,將 NVIDIA NeMo 用于驅動對話的 LLM ,將 Audio2Face 用于語音輸入的人工智能面部動畫。
如視頻 1 所示,這些模塊被無縫集成到 Convai 服務平臺中,并被輸入到虛幻引擎 5 和 MetaHuman 中,使身臨其境的 NPC Jin 栩栩如生。由 NVIDIA Lightspeed Studios 藝術團隊創作的拉面店場景在NVIDIA RTX Branch of Unreal Engine 5( NvRTX 5.1 )運行。場景使用RTX Direct Illumination( RTXDI )用于光線追蹤照明和陰影,與 NVIDIA DLSS 3 一起實現最大性能。
游戲開發商已經在使用現有的 NVIDIA 生成人工智能技術進行游戲開發:
- GSC 游戲世界歐洲領先的游戲開發商之一,正在其即將推出的游戲中采用 Audio2Face ,S . T . A . L . K . E . R . 2 :切爾諾貝利之心。
- 落葉,一家獨立游戲開發商,也在使用 Audio2Face 制作中的角色面部動畫索利斯堡,一款發生在火星上的第三人稱科幻驚悚游戲。
- 專注于人工智能的世代公司,如魅力. ai正在利用 Audio2Face 為他們的對話引擎中的動畫提供動力。
訂閱以了解更多信息NVIDIA ACE for Games, future developments, and early access programs。有關其功能、用例和集成的更多信息,請參閱Convai。有關將 NVIDIA RTX 和 AI 技術集成到游戲中的更多信息,請參閱NVIDIA 游戲開發者資源。
?