在 2024 年 Unreal Fest 大會上，NVIDIA 發布了適用于 NVIDIA ACE 的全新 Unreal Engine 5 設備端插件，使用戶能夠更輕松地在 Windows PC 上構建和部署由 AI 驅動的 MetaHuman 角色。ACE 是一套數字人技術，可提供由生成式 AI 驅動的語音、智能和動畫。
開發者現在還可以在 Autodesk Maya 中訪問新的 Audio2Face-3D 插件，以制作 AI 驅動的面部動畫。此插件提供了一個簡單、精簡的界面，有助于更輕松、更快速地在 Maya 中開發虛擬形象。該插件隨附源代碼，因此，作為開發者，您可以深入研究并開發適用于您選擇的數字內容創建（DCC）工具的插件。
NVIDIA 還構建了一個利用 Epic 的 Unreal Pixel Streaming 技術的 Unreal Engine 5 渲染器微服務。該微服務現在支持 NVIDIA ACE Animation Graph 微服務 和 Linux 操作系統的早期訪問版本。Animation Graph 微服務可實現逼真且響應靈敏的角色動作，并且借助 Unreal Pixel Streaming 支持，您可以將 MetaHuman 創作流式傳輸到任何設備上。
借助最新的 NVIDIA ACE 進展為 MetaHuman 角色賦予生
NVIDIA ACE 虛幻引擎 5 示例項目為希望將 ACE 集成到游戲和應用的開發者提供指南。此示例項目擴展了設備上 ACE 插件的數量，包括：
- Audio2Face-3D，用于制作唇部同步和面部動畫
- 用于生成響應的 Nemotron Mini 4B Instruct 模型。
- 用于上下文信息的檢索增強型生成（Retrieval-augmented generation，RAG）
作為開發者，您可以為自己的知識產權構建數據庫，以低延遲生成相關響應，并讓這些響應在 Unreal Engine 5 中無縫驅動相應的 MetaHuman 面部動畫。每個微服務都經過優化，可在 Windows PC 上運行，延遲低，內存占用少。
這些新插件即將推出。 首先，請確保您下載了適當的 ACE 插件和 Unreal Engine 示例以及 MetaHuman 角色 。
使用 Maya ACE 插件簡化 3D 動畫?
Autodesk Maya 為游戲開發者和技術美工提供高性能動畫功能，以創建高質量的 3D 圖形。現在，您可以使用 Audio2Face-3D 插件更輕松地為任何角色生成高質量的音頻驅動的面部動畫。簡化的用戶界面使您能夠無縫過渡到 Unreal Engine 5 環境。源代碼和腳本高度可定制，可修改以便在其他數字內容創建工具中使用。
首先， 生成 API 密鑰 或下載 Audio2Face-3D 微服務 。Audio2Face-3D 微服務是 NVIDIA NIM 的一部分，NVIDIA NIM 是一套易于使用的微服務，可加快基礎模型在任意云或數據中心的部署。
接下來，確保您已安裝 Autodesk Maya 2023、2024 或 2025。訪問 NVIDIA/Maya-ACE GitHub 資源庫，該資源庫包括 Maya 插件、gRPC 客戶端庫、測試資產和示例場景——使用 Audio2Face-3D 進行探索、學習和創新所需的所有內容。
使用 UE5 像素流技術擴展數字人技術部署
在通過云端部署數字人技術時，我們的目標是同時覆蓋盡可能多的客戶。流式傳輸高保真角色需要大量的計算資源。NVIDIA ACE 中的最新 Unreal Engine 5 渲染器微服務增加了對 NVIDIA Animation Graph 微服務和 Linux 操作系統的早期訪問支持。
Animation Graph 是一種微服務，可與其他 AI 模型交互，為角色創建對話式工作流。它負責連接開發者 RAG 架構，同時維護上下文和對話歷史記錄。借助新的 UE5 像素流兼容性，您可以在云端服務器上運行 MetaHuman 角色，并通過 Web Real-Time Communication（WebRTC）將其渲染的幀和音頻串流到任何瀏覽器和邊緣設備。
開始使用?
要開始使用 Unreal Engine 5 渲染器微服務，請 申請早期訪問 。了解更多關于 NVIDIA ACE 的信息，并 下載 NIM 微服務 ，開始構建由生成式 AI 提供支持的游戲角色。
?
