Michael Woods – NVIDIA 技術博客
http://www.open-lab.net/zh-cn/blog
閱讀開發者創建的最新技術信息、頭條新聞 和內容。
Wed, 26 Mar 2025 09:27:09 +0000
zh-CN
hourly
1
196178272 -
在 NVIDIA DGX 云上使用 NVIDIA NeMo Curator 處理 PB 級視頻
http://www.open-lab.net/zh-cn/blog/petabyte-scale-video-processing-with-nvidia-nemo-curator-on-nvidia-dgx-cloud/
Tue, 18 Mar 2025 02:53:05 +0000
http://www.open-lab.net/zh-cn/blog/?p=13281
Continued]]>
隨著 物理 AI 的興起，視頻內容生成呈指數級增長。一輛配備攝像頭的自動駕駛汽車每天可生成超過 1 TB 的視頻，而機器人驅動的制造廠每天可生成 1 PB 的數據。 要利用這些數據來訓練和微調 世界基礎模型 (WFMs) ，您必須首先高效地處理這些數據。 傳統的固定容量批量處理流水線難以應對這種規模，通常未充分利用 GPU，并且無法匹配所需的吞吐量。這些效率低下的情況減緩了 AI 模型的開發，并增加了成本。 為了應對這一挑戰， NVIDIA NeMo Curator 團隊 開發了一個靈活的 GPU 加速流式傳輸管道，用于大規模視頻管護，現在可在 NVIDIA DGX Cloud 上使用 。在本文中，我們將探討在管道中進行的優化，包括 自動擴展和負載均衡技術，以確保在充分利用可用硬件的同時優化各管道階段的吞吐量。 結果如何？更高的吞吐量、
Source
]]>
13281
人人超碰97caoporen国产