Kubeflow – NVIDIA 技術博客
http://www.open-lab.net/zh-cn/blog
閱讀開發者創建的最新技術信息、頭條新聞 和內容。
Thu, 01 Sep 2022 05:50:44 +0000
zh-CN
hourly
1
196178272 -
使用 RAPIDS 加速 KubeFlow 上的 ETL
http://www.open-lab.net/zh-cn/blog/accelerating-etl-on-kubeflow-with-rapids/
Tue, 30 Aug 2022 05:45:00 +0000
http://www.open-lab.net/zh-cn/blog/?p=5021
Continued]]>
在 機器學習 和 MLOps world ， GPU 被廣泛用于加速模型訓練和推理，但工作流的其他階段（如 ETL 管道或超參數優化）如何？ 在 RAPIDS 數據科學框架， ETL 工具的設計使使用 Python 的數據科學家具有熟悉的外觀。您當前使用的是 Pandas , NumPy , Scikit Learn ，或 PyData Stack 在您的 KubeFlow 工作流中？如果是這樣，您可以使用 RAPIDS 通過利用集群中可能已經存在的 GPU 來加速工作流的這些部分。 在本文中，我將演示如何將 RAPIDS 放入 KubeFlow 環境。首先在交互式筆記本環境中使用 RAPIDS ，然后擴展到單個容器之外，使用 Dask 跨多個節點使用多個 GPU 。 本文假設您已經對 Kubernetes 和 KubeFlow 有所了解。
Source
]]>
5021
人人超碰97caoporen国产