HPC 軟件開發工具包 – NVIDIA 技術博客

借助基礎 HPC 軟件發揮 NVIDIA Grace 和 NVIDIA Hopper 架構的強大功能

Thu, 16 Nov 2023 05:26:09 +0000

高性能計算（HPC）為模擬和建模、醫療健康、生命科學、工業和工程等領域的應用提供支持。在現代數據中心，HPC 與 AI 協同工作，以變革性的新方式利用數據。新一代 HPC 應用程序對性能和吞吐量的需求催生了一個能夠處理多種工作負載并在 CPU 和 GPU 之間實現緊密協作的加速計算平臺。NVIDIA Grace CPU 和 NVIDIA Hopper GPU 構成了用于 HPC 開發的行業領先硬件生態系統。 NVIDIA 提供了一系列工具、庫和編譯器，幫助開發者充分利用 NVIDIA Grace 和 NVIDIA Grace Hopper 架構的潛力。這些資源支持創新，并助力應用程序最大化地利用加速計算的優勢。此基礎軟件堆棧不僅提供了 GPU 加速的方法，還包括在基于 NVIDIA Grace 的系統上移植和優化應用程序的策略。

Source

]]>

借助 NVIDIA Grace Hopper 超級芯片簡化 HPC 的 GPU 編程

Mon, 13 Nov 2023 06:07:54 +0000

NVIDIA RTX GPU 中的 NVIDIA Grace Hopper 超級芯片系統為開發者處理 GPU 編程的方式帶來了一些戲劇性的變化。最值得注意的是，CPU 和 GPU 顯存之間的雙向、高帶寬和緩存一致性連接意味著用戶可以在使用單個統一地址空間的同時為這兩個處理器開發應用程序。每個處理器都保留自己的物理內存，該內存的設計具有與最適合每個處理器的工作負載相匹配的帶寬、延遲和容量特性。針對現有的獨立顯存 GPU 系統編寫的代碼將繼續保持高性能運行，而無需針對新的 NVIDIA Grace Hopper 架構進行修改。我們最近的博文借助異構內存管理簡化 GPU 應用程序開發詳細介紹了單地址空間為開發者帶來的一些優勢，以及它在通過 PCIe 連接至 x86_64 CPU 的 NVIDIA GPU 系統上的工作原理。所有應用程序線程（GPU 或…

Source

]]>

使用 NVIDIA Compute Sanitizer 更有效地調試 CUDA

Thu, 29 Jun 2023 04:04:53 +0000

調試代碼是軟件開發的關鍵方面，但可能具有挑戰性且耗時。并行編程可以為已經很復雜的調試過程引入新的維度，其中可以同時處理數千個線程。開發人員可以使用各種工具和技術來幫助使調試變得更簡單、更高效。本文介紹了一種調試工具：NVIDIA Compute Sanitizer。我們將探索這些功能，并通過示例向您展示它的用途，以便您可以在調試過程中節省時間和精力，同時提高 CUDA 應用程序的可靠性和性能。 Compute Sanitizer 隨CUDA Toolkit一起捆綁。 Compute Sanitizer 是一套工具，可以對代碼的功能正確性執行不同類型的檢查。調試的一個關鍵挑戰是找到錯誤的根本原因，解決它通常比追蹤它更容易，尤其是在并行執行環境中，因為在這種環境中，錯誤的來源可能是瞬態的。 Compute Sanitizer 通過檢查代碼是否存在內存訪問違規、

Source

]]>