NVIDIA 剛在 CES 2023 上宣布, NVIDIA Omniverse Avatar 云引擎( ACE )現在可以提前訪問。構建虛擬化身和虛擬助理的開發人員和團隊可以注冊加入該計劃,其中包括訪問云原生 AI 微服務的 Omniverse ACE 套件,以更快、更容易地開發交互式虛擬化身。
早期合作伙伴包括 Ready Player Me ,其頭像在 CES 演示中展示。通過這一早期訪問計劃, NVIDIA 正在尋找開發人員和合作伙伴,以提供有關微服務的反饋,合作改進產品,并幫助推動逼真、交互式的數字人的極限。隨著項目的不斷擴大,申請人將在滾動的基礎上進行審查和批準。
什么是 Omniverse ACE 早期訪問計劃?
開發化身的方法通常需要專業知識、專用設備和人工密集型工作流。
為了簡化化身創建, Omniverse ACE 支持 NVIDIA AI 技術的無縫集成,包括預構建模型、工具集和特定領域的參考應用程序。可用的化身應用程序構建在大多數引擎上,并部署在公共云或私有云上。
視頻 1 。 CES2023 特別地址展示 Omniverse ACE 早期訪問。
早期訪問計劃包括訪問 Omniverse ACE 動畫 AI 和對話式 AI 微服務的預發布版本,包括:
- 3D animation AI microservice 用于第三方化身。它使用 Omniverse Audio2Face 生成 AI ,通過僅從音頻文件創建逼真的面部動畫,使虛幻引擎和其他渲染工具中的人物栩栩如生。
- 2D animation AI microservice, 被稱為“實時肖像”,使用實時視頻源可以輕松制作 2D 肖像或風格化人臉的動畫。
- Text-to-speech microservice 使用 NVIDIA Riva TTS 從原始轉錄本合成自然發音語音,而無需任何附加信息,例如語音模式或節奏。
項目成員還可以訪問工具、示例參考應用程序和支持資源,包括文檔。
EA 計劃最理想的用例是什么?
NVIDIA Omniverse ACE 憑借其云原生微服務設計和基礎設施,最適合從公共云或私有云部署的應用程序,并設計為可擴展。
這個早期的訪問版本包括容器化的微服務,需要開發人員通過自己的云基礎設施進行部署。其他資源包括 NVIDIA UCF Studio ,這是一個用于開發云原生、實時和多模式 AI 應用程序的低代碼計算框架。 注冊以申請 UCF 搶先體驗?。
例如,您可以創建一個簡單的工作流,利用 UCF Studio 將 Riva TTS 微服務與 Omniverse ACE 3D 動畫 AI 微服務連接起來。結果是一個云就緒的化身應用程序,它用合成語音說出輸入的文本,并動畫化化身的嘴唇和面部動作。
也就是說,并非所有應用程序都必須在云上運行。任何創作不需要大規模部署的離線化身的人都可以利用 NVIDIA AI SDK 和工具,包括 Omniverse Audio2Face 。
開始使用 Omniverse ACE 早期訪問
對 Omniverse ACE 感興趣,但不確定早期訪問計劃是否合適?查看以下資源以了解更多信息,并開始試用 NVIDIA AI 核心技術
- 了解有關 Omniverse ACE 的更多信息,并觀看 NVIDIA special address at CES on demand 。
- 探索相關的 NVIDIA AI 技術,包括 Omniverse Audio2Face 和 Riva TTS 。這些 SDK 和工具非常適合不必針對云進行優化的化身應用程序。他們是開始熟悉技術的好方法。
- 注冊 Omniverse ACE early access program ,并盡可能多地分享有關您的云原生化身用例的詳細信息。 NVIDIA 團隊將審查每個應用程序并跟進任何問題。
?