虛擬形象云引擎 (ACE) – NVIDIA 技術博客

借助新的小語言模型，在 NVIDIA RTX AI PC 上部署智能體、助理和虛擬形象

Tue, 17 Dec 2024 09:46:26 +0000

NVIDIA 剛剛發布了一系列小語言模型 (SLMs)，可增加數字人用于增強響應能力的信息量和類型。其中包括可提供更多相關答案的新型大上下文模型，以及可將圖像用作輸入的新型多模態模型。這些模型現已作為 NVIDIA ACE 的一部分提供，NVIDIA ACE 是一套數字人技術，可為代理、助手和虛擬形象帶來生命。為了提升數字人的響應速度，他們必須能夠像人類一樣提取更多的世界背景。NVIDIA Nemovision-4B-Instruct 模型是一種小型多模態模型，使數字人能夠理解現實世界和 Windows 桌面上的視覺圖像，從而輸出相關響應。此模型使用最新的 NVIDIA VILA 和 NVIDIA NeMo 框架和配方進行蒸餾、剪枝和量化，使其足夠小，可以在廣泛的 NVIDIA RTX GPU 上表現出色，同時保持開發者所需的準確性。多模式是智能體工作流的基礎，

Source

]]>

借助 2D 和 3D 數字人虛擬形象擴展 AI 智能體界面選項

Fri, 22 Nov 2024 07:29:09 +0000

在與生成式 AI 應用程序交互時，用戶有多種通信選項 – 文本、語音或通過數字化的虛擬形象。傳統聊天機器人或 Copilot 應用具有文本界面，用戶可在其中輸入查詢并接收基于文本的響應。對于免持通信，語音人工智能技術如自動語音識別 (ASR) 和文本轉語音 (TTS) 促進了口頭互動，非常適合電話客戶服務等場景。此外，將數字化虛擬形象與語音能力相結合，可為用戶提供更具動態性的界面，以便用戶以直觀方式與應用互動。根據 Gartner 的預測，到 2028 年，擁有 500 名以上員工的組織中，45% 的組織將利用員工人工智能虛擬形象來擴展人力資本能力。1 數字虛擬形象的風格差異很大，一些用例受益于逼真的 3D 或 2D 虛擬形象，而其他用例使用風格化或卡通化的虛擬形象時效果更好。要開始創建逼真的數字人，

Source

]]>

借助 NVIDIA ACE 和 Unreal Engine 5 實現 AI 驅動的 MetaHuman 部署簡化和擴展

Tue, 01 Oct 2024 08:56:54 +0000

在 2024 年 Unreal Fest 大會上，NVIDIA 發布了適用于 NVIDIA ACE 的全新 Unreal Engine 5 設備端插件，使用戶能夠更輕松地在 Windows PC 上構建和部署由 AI 驅動的 MetaHuman 角色。ACE 是一套數字人技術，可提供由生成式 AI 驅動的語音、智能和動畫。開發者現在還可以在 Autodesk Maya 中訪問新的 Audio2Face-3D 插件，以制作 AI 驅動的面部動畫。此插件提供了一個簡單、精簡的界面，有助于更輕松、更快速地在 Maya 中開發虛擬形象。該插件隨附源代碼，因此，作為開發者，您可以深入研究并開發適用于您選擇的數字內容創建（DCC）工具的插件。 NVIDIA 還構建了一個利用 Epic 的 Unreal Pixel Streaming 技術的 Unreal Engine 5…

Source

]]>

NVIDIA NIM 智能體藍圖助力 AI 應用打造數字人機交互界面

Wed, 25 Sep 2024 09:58:13 +0000

為客戶提供高質量的服務仍然是各行各業企業的首要任務，從回答問題和解決問題到促進在線訂單。隨著企業在全球范圍內擴展運營并擴展產品以競爭，對無縫客戶服務的需求呈指數級增長搜索知識庫文章或瀏覽復雜的電話樹可能是一種有用資源，但客戶通常必須解析的信息密度會導致保留率不佳。隨著生成式 AI 、對話式 AI 和視覺 AI 等技術的融合，應用開發團隊正在尋找方法來提高與自助客戶應用的互動，從而提高整體滿意度和保留率。現在，您可以添加數字人界面來個性化聊天機器人應用，而不是基于文本的聊天機器人。此外，您還可以使用檢索增強生成技術 (RAG) 實現流暢的人機交互。本文將介紹如何使用 NVIDIA NIM Agent 藍圖實現這一目標，該藍圖將 NVIDIA NIM 微服務與參考代碼和文檔相結合。

Source

]]>

首個設備上小語言模型的部署提高游戲角色扮演體驗

Tue, 20 Aug 2024 08:34:24 +0000

在 Gamescom 2024 游戲展上，NVIDIA 宣布推出首款用于提高游戲角色對話能力的設備上小語言模型 (SLM)。我們還宣布，首款展示 NVIDIA ACE 和數字人技術的游戲是由 Seasun Games 開發的‘機甲突破 (Mecha BREAK)’，該游戲可讓角色如生，并在 NVIDIA GeForce RTX AI PC 上提供更動態、更身臨其境的游戲體驗。 NVIDIA ACE 是一套數字人技術，可以提供由生成式 AI 提供動力支持的語音、智能和動畫。它現在包含首款 NVIDIA SLM，即 Nemotron-4 4B Instruct。這款新模型可作為 NVIDIA NIM 提供，供游戲開發者在云和設備上部署。NVIDIA NIM 是一套易于使用的微服務，可以加快基礎模型在任何云或數據中心的部署速度。

Source

]]>

借助 NVIDIA ACE 打造逼真的數字人物 (現已正式發布)

Tue, 04 Jun 2024 07:47:02 +0000

NVIDIA ACE 是一套利用生成式人工智能實現數字人如生的技術，現已正式面向開發者提供，這些推理微服務封裝為 NVIDIA NIM，使開發者能夠為游戲、客戶服務、醫療健康等領域提供高質量的自然語言理解、語音合成和面部動畫。 NVIDIA 還推出了 ACE PC NIM 微服務，可在超過 1 億臺 RTX AI PC 和筆記本電腦的安裝基礎上進行搶先部署。領先的游戲和平臺開發者正在徹底改變各行各業的實時角色交互。許多公司，例如 Aww Inc、Dell Technologies、Gumption, Hippocratic AI、Inventec、OurPalm、Perfect World Games、Reallusion，ServiceNow、SoulBotix、SoulShell 和 Uneeq 正在采用 ACE 并將其集成到其平臺和應用程序中。

Source

]]>

適用于數字人的生成式 AI 和由 AI 提供支持的全新 NVIDIA RTX 照明

Tue, 19 Mar 2024 06:00:33 +0000

NVIDIA 在 GDC 2024 大會上宣布，Inworld AI 等領先的 AI 應用程序開發者，正在使用 NVIDIA 數字人技術加速部署生成式 AI 驅動的游戲角色。此外，NVIDIA 還更新了 RTX SDK，以簡化高質量游戲世界的創建。 NVIDIA 數字人技術助力新一代游戲角色用戶可將全套 NVIDIA 數字人技術或單個微服務整合到其產品中：這些創新在由 Inworld AI 與 NVIDIA 合作完成的 Covert Protocol（秘密協議）演示中得到了展示。在該演示中，玩家可以扮演一個經驗豐富的私人偵探，并在游戲中體驗突破常規的 NPC 交互。該演示使用了 OpenAI 的 ChatGPT 3.5 、ElevenLabs 文本轉語音 (TTS)、Riva ASR 和 A2F 微服務，

Source

]]>