Jamil Semaan – NVIDIA 技術博客 http://www.open-lab.net/zh-cn/blog 閱讀開發者創建的最新技術信息、頭條新聞 和內容。 Thu, 12 Dec 2024 04:06:43 +0000 zh-CN hourly 1 196178272 由 RAPIDS cuDF 提供支持的 Polars GPU 引擎現已推出公測版 http://www.open-lab.net/zh-cn/blog/polars-gpu-engine-powered-by-rapids-cudf-now-available-in-open-beta/ Tue, 17 Sep 2024 09:25:59 +0000 http://www.open-lab.net/zh-cn/blog/?p=11317 Continued]]> 今天,Polars 發布了一款由 RAPIDS cuDF 提供支持的新型 GPU 引擎,可在 NVIDIA GPUs 上將 Polars 工作流的速度提升高達 13 倍,使數據科學家能夠在單臺機器上在數秒內處理數億行數據。 像 pandas 這樣的傳統數據處理庫是單線程的,超過數百萬行數據的使用已變得不切實際。分布式數據處理系統可以處理數十億行,但會增加處理中小型數據集的復雜性和開銷。 在高效處理數十萬行到數百萬行數據的工具方面存在差距。此類工作負載在金融、零售和制造等行業的模型開發、需求預測和物流中很常見。 Polars 是面向數據科學家和工程師的發展最快的 Python 庫之一,專為應對這些挑戰而從頭開始設計。它使用高級查詢優化來減少不必要的數據移動和處理,使數據科學家能夠在單臺機器上大規模地順利處理數以億計行的工作負載。

Source

]]>
11317
人人超碰97caoporen国产