• <xmp id="om0om">
  • <table id="om0om"><noscript id="om0om"></noscript></table>
  • 3 月 19 日下午 2 點,鎖定 NVIDIA AI 網絡中文專場。立即注冊觀看
    內容創建/渲染

    適用于數字人的生成式 AI 和由 AI 提供支持的全新 NVIDIA RTX 照明

    NVIDIA 在 GDC 2024 大會上宣布,Inworld AI 等領先的 AI 應用程序開發者,正在使用 NVIDIA 數字人技術加速部署生成式 AI 驅動的游戲角色。此外,NVIDIA 還更新了 RTX SDK,以簡化高質量游戲世界的創建。

    NVIDIA 數字人技術助力新一代游戲角色

    用戶可將全套 NVIDIA 數字人技術或單個微服務整合到其產品中:

    • NVIDIA Avatar Cloud Engine (ACE):通過 NVIDIA Audio2Face (A2F) 提供面部動畫,以及由 NVIDIA Riva 自動語音識別 (ASR) 和文本轉語音 (TTS) 提供的語音支持,可以讓數字人更加栩栩如生。
    • NVIDIA NeMo:一個用于開發自定義生成式 AI 的端到端框架。NeMo 使用戶能夠通過精確數據管護、先進自定義功能、檢索增強生成和加速性能來完成企業就緒型模型。
    • NVIDIA RTX:RTX 全局照明(RTXGI)和 DLSS 3.5 等渲染技術的集合,可在游戲和應用中實現實時的路徑追蹤。

    這些創新在由 Inworld AI 與 NVIDIA 合作完成的 Covert Protocol(秘密協議)演示中得到了展示。在該演示中,玩家可以扮演一個經驗豐富的私人偵探,并在游戲中體驗突破常規的 NPC 交互。

    該演示使用了?OpenAI?的 ChatGPT 3.5 、ElevenLabs 文本轉語音 (TTS)、Riva ASR 和 A2F 微服務,以增強 Inworld 的語言、語音和動畫制作流程。Inworld 的 AI 引擎采用了多模態方法來提升 NPC 的表現,它將認知、感知和行為系統相結合,同時利用其 Unreal Engine 插件進行集成,讓使用 MetaHumans 變得快速且簡單。

    視頻 1. NVIDIA ACE | NVIDIA x Inworld AI – 在隱秘協議中突破游戲角色的界限

    用戶可以通過申請搶先體驗計劃來開啟 NVIDIA ACE 的旅程,并獲取正在開發的 AI 模型。有關可用模型的更多信息,請參閱 NVIDIAAPI Catalog。在該網站上,用戶會發現一套易于使用、旨在加速生成式 AI 部署的微服務—— NVIDIA NIM,其適用于 Riva ASR (模型名稱為 Parakeet) 和 A2F。用戶可以直接通過瀏覽器或通過運行完全加速堆棧的 API 端點來體驗和評估這些微服務。如果用戶擁有 NVIDIA AI Enterprise 許可證,請下載 NIM 并在 DGX 云或任何 CSP 和私有云上部署。

    對于尋求端到端數字人解決方案的游戲開發者,請聯系集成 ACE 的 NVIDIA 中間件合作伙伴,包括 ConvaiInworldData MonstersQuantiphi UneeQ

    有關數字人技術(包括 NVIDIA ACE)的問題或反饋,請參閱 Digital Human 論壇

    AI 驅動的照明改進和更輕松的渲染集成

    NVIDIA 推出了 RTX 全局照明(RTXGI)2.0 SDK,其可通過 AI 實現光線追蹤的間接照明。RTXGI 的推出進一步豐富了目前已有的神經渲染技術選項:

    最新的算法神經輻射緩存(NRC)是一種由 AI 驅動的解決方案,它能夠實時訓練場景的輻射緩存,并使用反應式照明來處理全動態場景。這種技術不需要事先為幾何圖形和材質烘焙靜態照明,從而為要求嚴苛的場景提供了更出色的性能和更準確的全局照明。

    為提供可擴展性,NVIDIA 推出了空間哈希輻射緩存(SHaRC),該版本無需使用神經網絡即可提供與 NRC 類似的優勢。它與任何支持 DirectX 或 Vulkan 光線追蹤的 GPU 兼容。這是一種基于空間哈希數據結構構建的輻射緩存,專為用于路徑追蹤的快速且可擴展的全局照明技術而設計。

    下載 NVIDIA RTXGI SDK。有關面向游戲開發者的所有 NVIDIA 技術的更多信息,請參閱游戲開發頁面。

    +2

    標簽

    人人超碰97caoporen国产