• <xmp id="om0om">
  • <table id="om0om"><noscript id="om0om"></noscript></table>
  • 3 月 19 日下午 2 點,鎖定 NVIDIA AI 網絡中文專場。立即注冊觀看
    內容創建/渲染

    借助 NVIDIA Maxine 體驗實時音頻和視頻通信

    ?

    我們的 NVIDIA Maxine 開發者平臺通過為開發者和企業提供各種低代碼實施方案,重新定義了視頻會議和編輯。其中包括 GPU 加速的 AI 微服務、SDK 和 NVIDIA 托管的 API 端點,用于實時 AI 增強音頻和視頻流。

    最新版本的 Maxine 開發者平臺帶來了語音字體功能的搶先體驗、實時肖像視頻的改進,以及 Maxine 眼神交流功能的升級。此外,Video Live Portrait 和 Voice 字體功能現已在 NVIDIA NGC 目錄 中提供。您現在可以在 NVIDIA 加速的云基礎設施上,體驗 Maxine 預訓練的生成式 AI 模型的實際應用。

    NVIDIA AI 基礎模型 Maxine 等公司展示了企業現在如何連接其應用,以讀取和集成 NVIDIA Foundations API 端點,并快速創建和部署性能優化的 AI 模型,同時降低 TCO。

    NVIDIA Maxine Live Portrait webpage as seen on NVIDIA AI Foundation Models.
    圖 1.您現在可以體驗 NVIDIA Maxine 實時肖像和語音字體

    Maxine 團隊為精選合作伙伴提供了機會,提前體驗并反饋 Maxine 全新的 Studio Voice 功能和由語音驅動的 Live Portrait 功能。欲了解更多信息,請訪問 Maxine 微服務搶先體驗計劃Maxine SDK 搶先體驗計劃

    “借助 Maxine 開發者平臺,您現在可以在 NVIDIA AI 基礎上體驗先進的 Maxine 功能,”Maxine 開發者平臺工程總監 Rochelle Pereira 說,“您可以選擇在 CSP 或 NVIDIA DGX 云 上進行部署,并選擇您的集成接觸點,從微服務容器到 SDK 庫,甚至是隨時可以集成的 NVIDIA AI 基礎模型端點,使得在應用程序工作流程中增強實時音頻和視頻通信變得更加容易。”

    新功能亮點

    NVIDIA Maxine 可在視頻會議、直播和離線視頻中為演講者提供清晰的溝通和更高的存在感。Maxine 的先進 AI 模型可打造出可通過標準麥克風和攝像頭實現的高質量效果。

    自然的眼球運動

    新制作的 Maxine Eye Contact 現在在視線重定向和精細控制方面具有更流暢的過渡,能夠實現更自然的眼部動作。開發者可以通過 Maxine 搶先體驗計劃 接入此技術,并可結合 NVIDIA AI Enterprise 進行開發。

    2D 照片動畫

    最新的 Maxine 版本還改進了視頻驅動的 Live Portrait,包括提高穩健性和背景穩定性。Maxine Live Portrait 一直是游戲規則的改變者,支持由視頻驅動的 2D 照片動畫。這個新的 Maxine 版本還引入了語音驅動的 Live Portrait,將語音作為一種新的駕駛模式。

    現在,您可以使用語音為 2D 照片賦予動畫效果,即使在無法實時傳輸視頻流的條件下,也能營造出一種真實的存在感。NVIDIA Riva 的語音驅動實時肖像和 NVIDIA Maxine 的語音字體,為 2D 動畫領域帶來了新的可能性。

    語音驅動角色

    NVIDIA Maxine 視頻和語音實時人像動畫 AI 微服務是不想在攝像機上出現的任何人的理想選擇。使用風格化或逼真的肖像照片為個人或公司創建獨特的角色。語音驅動的實時人像可供選定的合作伙伴反饋。

    視頻 1.使用語音實時制作 2D 肖像動畫,無需網格或索具

    語音自定義

    借助新的 Maxine 語音字體功能,生成式 AI 模型現可在 Maxine 搶先體驗計劃 中使用。您可以根據所需的音色定制語音,為品牌生成獨特的語音,或復制您的語音以與其他翻譯微服務一起使用。例如,這使您能夠使用自己的語音用不同的語言說話。該功能可以將音頻樣本轉換為數字語音,只需 30 秒的參考音頻。

    查看以下示例,體驗語音字體。

    原點音頻示例:

    參考音頻示例:

    語音字體輸出,將參考音頻語音應用到原始音頻:

    最新的 NVIDIA Maxine AI 增強功能也可提供給選定的開發合作伙伴以獲取反饋。借助 Studio Voice,您可以使用具有高端 Studio 麥克風特性的廉價麥克風增強錄制效果。Studio Voice 消除了由低質量麥克風引起的語音頻率降低。此外,使用預訓練的神經網絡添加了動態范圍和帶寬擴展等特性,從而為生成的音頻提供豐富而生動的聲音。

    通過以下示例搶先預覽 Studio Voice:

    基本麥克風上的輸入語音:

    Studio Voice 輸出:

    總結

    借助 NVIDIA Maxine,您可以使用 AI 增強音頻和視頻實時通信。最新的 Maxine 版本通過 NVIDIA AI Enterprise 提供企業級支持和生產就緒型工具,包括 NVIDIA Triton 推理服務器 等。歡迎 試用最新的 NVIDIA Maxine 功能

    如果您想搶先體驗最新的 NVIDIA Maxine 功能并提供反饋,請申請Maxine 微服務搶先體驗計劃Maxine SDK 搶先體驗計劃。如果您希望就尚未發布的語音驅動的 Live Portrait 或 Studio Voice 提供反饋,請通過 gjones@nvidia.com 聯系 Maxine 產品管理的 Greg Jones。

    您還可以通過參與 NVIDIA Maxine 和 NVIDIA Broadcast 應用調查,幫助我們改進即將發布版本中的 Maxine 功能。

    ?

    0

    標簽

    人人超碰97caoporen国产