NeRF – NVIDIA 技術博客

利用 AI 和 NVIDIA RTX GPU 加速現實捕捉工作流程效率

Mon, 07 Oct 2024 08:00:36 +0000

Reality Capture 可創建高度準確、細節豐富的沉浸式環境數字表示。現場掃描和加速數據處理方面的創新以及神經輻射場（Neural Radiance Fields）和高斯拼接等新興技術正在顯著增強 Reality Capture 的功能，這些技術正在徹底改變與物理世界的交互和分析。作為現實捕獲的第一步，站點掃描使用激光雷達和攝影測量等方法生成詳細的 3D 模型，同時由 NVIDIA RTX GPU 提供支持的加速處理可實現更快、更高效的數據處理。NeRFs 擅長生成逼真的 3D 場景，而高斯射板技術則提供了一種實現流暢、高效渲染的新穎方法。人工智能通過提供用于對象檢測、分割和分類的高級算法來增強這些工具，從而提供更深入的見解。本文將探討 NVIDIA 如何走在人工智能與現實捕獲集成的前沿，借助強大的 GPU、軟件解決方案和尖端研究推動這些技術進步。

Source

]]>

AI 驅動的 3D 打印技術助力外科醫生模擬手術訓練

Fri, 20 Sep 2024 07:34:12 +0000

華盛頓州立大學（WSU）的研究人員公布了一種新的 AI 指導 3D 打印技術，該技術可以幫助醫生打印復雜的人體器官復制品。外科醫生可以在進行實際手術之前使用這些器官模型進行練習，從而為醫生提供更多的工具來改善手術結果。該 AI 算法根據人體腎和前列腺的圖像和關鍵屬性（包括重量、大小、孔隙率和血管結構等特征）進行訓練。該算法與 3D 打印機配合使用的過程不斷改進，有助于為 3D 打印的三個重要部分找到最佳設置：模型的準確性、重量以及打印所需的時間。 WSU 機械和材料工程助理教授 Kaiyan Qiu 是這項研究的合著者之一，他說，AI 優化可以顯著縮短創建可行的 3D 模型所需的時間。該算法調整關鍵的 3D 打印變量，包括打印機的噴頭尺寸和行駛速度、打印材料的分配壓力以及每個打印層的高度，然后指導打印機為特定用例創建合適的模型。 “對于手術前器官模型，

Source

]]>

設計深度網絡以處理其他深度網絡

Thu, 17 Aug 2023 06:08:52 +0000

深度神經網絡（DNN）是從數據中學習函數的首選模型，如圖像分類器或語言模型。近年來，深度模型由于表示數據樣本本身而變得流行起來。例如，可以訓練深度模型來表示圖像、3D 對象或場景，這種方法稱為Implicit Neural Representations（另請參閱 Neural Radiance Fields和Instant NGP)。請繼續閱讀一些對預訓練的深度模型執行操作的示例，這些模型包括作為函數的 DNN 和作為數據的 DNN。假設您有一個使用隱式神經表示（INR）或神經輻射場（NeRF）表示的 3D 對象數據集。通常，您可能希望“編輯”對象以更改其幾何圖形或修復錯誤和異常。‌例如，拆除一個杯子的把手或使所有車輪比 NeRF 重建的車輪更對稱。不幸的是，使用 INR 和 NeRF 的一個主要挑戰是，它們必須在編輯之前進行渲染。實際上，

Source

]]>

NeRFs 如何幫助我重新想象世界

Mon, 15 May 2023 04:48:31 +0000

為什么圖像還沒有進化到二維？為什么我們對百年科技感到滿意？如果已經有了可以推動內容世界向前發展的技術，而且只需要一臺相機，該怎么辦？這項技術神經輻射場（ NeRF ）。盡管這項技術誕生于幾年前（ 2020 年），但它的持續發展速度不容忽視或低估。 NeRF 準備在今年迎來一個 DALL-E 時刻。它正在顛覆生產（虛擬和現場）、現場活動、體系結構和建筑以及一般內容創建和內存捕獲等行業的長期流程。 NeRF 是一種顛覆性技術，在圖像渲染領域引起了轟動。 NeRF 在生成復雜 3D 對象的高度詳細和逼真的圖像方面已經取得了重大進展。在這篇文章中，我深入探討了 NeRF 的現狀，并討論了它們對各個行業的潛在影響。雖然這個名字聽起來很嚇人，但它本身就是一個神經輻射場。總之， NeRF 可以拍攝一系列 2D 圖像，并從中創建逼真的 3D 場景。它是通過神經網絡訓練的數據，

Source

]]>

在 VR 中使用 NVIDIA Instant NeRF 將 2D 圖像轉換為沉浸式 3D 場景

Tue, 31 Jan 2023 07:16:18 +0000

數千名開發人員和內容創作者使用 NVIDIA Instant NeRF 構建了令人驚嘆的 3D 視覺效果，這是一種將一組靜態圖像轉換為真實 3D 場景的渲染工具。現在，也可以在 VR 中導航 Instant NeRF ，并使用最新的 Instant NeRF software update 進行 3D 創作。被時代雜志命名為 2022 最佳發明， Instant NeRF 提供了攝影、 3D 圖形和虛擬世界的未來一瞥。借助 VR 中的 Instant NeRF ，用戶可以使用 2D 圖像快速創建虛擬場景。使用包括中心凹、動態縮放、 NVIDIA DLSS 和可選的第二個 GPU 在內的高級渲染技術，創作者可以在廣泛的預算范圍內實現所需的幀速率和分辨率目標。傳統上，創建 3D 和虛擬場景是一個耗時、昂貴的過程，需要專門的設備和專業知識。

Source

]]>

《時代》雜志將 NVIDIA Instant NeRF 評為 2022 年最佳發明

Sat, 12 Nov 2022 07:11:00 +0000

時代雜志將 NVIDIA 命名為 Instant NeRF ，這是一種能夠將 2D 圖像轉換為 3D 場景的技術，也是 2022 年最佳發明之一。 “在 NVIDIA Instant NeRF 之前，創建 3D 場景需要專門的設備、專業知識以及大量的時間和金錢。現在只需要幾張照片和幾分鐘，”《時代周刊》在其發布中寫道。 3D 渲染工具在 2022 年 SIGGRAPH 2022 上推出，這是世界上最大的計算機圖形和交互技術會議。在 SIGGRAPH 上， NVIDIA 研究人員托馬斯·穆勒、亞歷克斯·埃文斯、克里斯托夫·席德和亞歷山大·凱勒提交了他們的論文 Instant Neural Graphics Primitives with a Multiresolution Hash Encoding 。這項創新研究很快受到歡迎，

Source

]]>