在 Gamescom 2024 游戲展上，NVIDIA 宣布推出首款用于提高游戲角色對話能力的設備上小語言模型 (SLM)。我們還宣布，首款展示 NVIDIA ACE 和數字人技術的游戲是由 Seasun Games 開發的‘機甲突破 (Mecha BREAK)’，該游戲可讓角色如生，并在 NVIDIA GeForce RTX AI PC 上提供更動態、更身臨其境的游戲體驗。
NVIDIA ACE 推出專門為角色扮演打造的SLM
NVIDIA ACE 是一套數字人技術，可以提供由生成式 AI 提供動力支持的語音、智能和動畫。它現在包含首款 NVIDIA SLM，即 Nemotron-4 4B Instruct。這款新模型可作為 NVIDIA NIM 提供，供游戲開發者在云和設備上部署。NVIDIA NIM 是一套易于使用的微服務，可以加快基礎模型在任何云或數據中心的部署速度。
Nemotron-4 4B Instruct 通過提煉、剪枝和 INT4 量化進行優化，以實現設備上的推理速度和加速。VRAM 使用量已降低到約 2 GB，與大型語言模型（LLMs）相比，獲得首個令牌的時間顯著加快。
- 蒸是訓練較小的模型（稱為學生模型）以模擬較大模型（教師模型）的輸出的過程。
- 剪枝是移除學生模型的非關鍵輸出的過程。
- 量化是降低模型的權重和激活精度的過程。
Nemotron-4 4B Instruct 來自 Nemotron-4 15B LLM，并通過指令調優專門構建。指令調優是一種根據指令提示微調模型的技術，以便更好地執行特定任務。該模型提供更好的角色扮演、檢索增強生成（RAG）和函數調用功能，使游戲角色能夠更直觀地理解玩家的指令，對游戲玩家做出響應，并執行更準確和相關的操作。
您可以在云端的數字人技術制作流程中使用Nemotron-4 4B Instruct NIM，或利用超過1億的NVIDIA GeForce RTX驅動PC和筆記本電腦進行設備上推理。
為了讓您更輕松地使用 Nemotron-4 4B Instruct NIM，Unreal Engine 5 ACE 示例應用程序已經更新，提供了設備上的插件支持。
借助 NVIDIA ACE NIM 實現首次游戲首映
NVIDIA Audio2Face-3D NIM 和 Whisper（OpenAI 的自動語音識別模型）可在設備上提供面部動畫和語音識別。Elevenlabs 通過云提供角色的語音。
在這個演示中，NVIDIA ACE 和數字人技術使玩家能夠與機械師進行交互，該機械師可以幫助他們從多樣化的機甲中進行選擇，以滿足其游戲風格或團隊需求，協助定制外觀，并就如何更好地準備其龐大的戰爭機器以進行戰斗提供建議。
游戲開發者探索最新的人類數字技術
NVIDIA ACE 和數字人技術繼續擴大其在游戲行業中的影響力。
全球游戲發行商兼開發商 Perfect World Games 正在利用AI驅動的新視覺功能推進其NVIDIA ACE和數字人技術演示”英雄（Legends）”。在演示中，角色Yun Ni可以使用由 ChatGPT-4o 提供支持的計算機攝像頭查看游戲玩家并識別現實世界中的人物和物體，為游戲體驗添加增強現實層。
這些功能將 PC 游戲的沉浸感和可訪問性提升到了新的水平。有關更多信息，請參閱 NVIDIA ACE 并下載 NIM，開始構建由生成式 AI 驅動的游戲角色。
?
