Computer Vision / Video Analytics – NVIDIA 技術ブログ http://www.open-lab.net/ja-jp/blog Mon, 27 May 2024 06:24:02 +0000 ja hourly 1 VILA を使用した NVIDIA ハードウェア上のビジュアル言語モデル http://www.open-lab.net/ja-jp/blog/visual-language-models-on-nvidia-hardware-with-vila/ Fri, 03 May 2024 05:37:14 +0000 http://www.open-lab.net/ja-jp/blog/?p=2517 Reading Time: 3 minutes ビジュアル言語モデルは、ここ最近大きく進化しました。ただし、既存のテクノロジは、通常、単一の畫像にしか対応していません。複數の畫像からの論理的な推論、コンテキスト學習への対応、動畫の理解は不可能です。また、推論速度も最適 … Continued]]> Reading Time: 3 minutes ビジュアル言語モデルは、ここ最近大きく進化しました。ただし、既存のテクノロジは、通常、単一の畫像にしか対応していません。複數の畫像からの論理的な推論、コンテキスト學習への対応、動畫の理解は不可能です。また、推論速度も最適化されていません。 NVIDIA は VILA を開発しました。これは包括的な事前トレーニング、指示チューニング、デプロイ パイプラインを備えたビジュアル言語モデルであり、NVIDIA のクライアントがマルチモーダル製品で成功するのを支援します。VILA は畫像と動畫両方の QA ベンチマークで SOTA パフォーマンスを達成し、複數畫像における強力な論理推論能力とコンテキスト學習能力を備えています。また、推論速度も最適化されています。 他の VLM と比較するとトークンの使用量は 4 分の 1…

Source

]]> 2517 cuDLA による NVIDIA Jetson Orin 上での YOLOv5 の紹介 http://www.open-lab.net/ja-jp/blog/introducing-yolov5-on-nvidia-jetson-orin-with-cudla/ Wed, 17 Jan 2024 03:51:27 +0000 http://www.open-lab.net/ja-jp/blog/?p=2197 Reading Time: 5 minutes この投稿は、Orin プラットフォームを使用する組込み開発者が、YOLOv5 をリファレンスとして、どのようにディープ ニューラル ネットワーク (DNN) を展開できるかについて、技術的に深く掘り下げたものです。読者が … Continued]]> Reading Time: 5 minutes この投稿は、Orin プラットフォームを使用する組込み開発者が、YOLOv5 をリファレンスとして、どのようにディープ ニューラル ネットワーク (DNN) を展開できるかについて、技術的に深く掘り下げたものです。読者が簡単に理解できるように、次のセクション “NVIDIA DLA 紹介” で NVIDIA DLA を紹介し、セクション “NVIDIA cuDLA 紹介” で cuDLA と呼ばれる DLA 用の CUDA プログラミング モデル拡張を紹介します。そして最後の “YOLOv5 と cuDLA、Jetson Orin で共演” では、YOLOv5、DLA、cuDLA の組み合わせによる、Jetson Orin プラットフォーム上での効率的なオブジェクト検出実裝について詳しく説明します。 DLA の詳細については、

Source

]]> 2197 TAO Toolkit 5.0 に追加された Data Service を活用 http://www.open-lab.net/ja-jp/blog/take-advantage-of-the-data-service-added-to-tao-toolkit-5-0/ Mon, 02 Oct 2023 02:24:44 +0000 http://www.open-lab.net/ja-jp/blog/?p=2034 Reading Time: 8 minutes 2023 年 7 月末に TAO Toolkit 5.0 がリリースされました。TAO Toolkit 5.0 ではいくつかの機能が追加されていますが、本記事ではデータの前処理、アノテーション、分析に役立つ TAO Da … Continued]]> Reading Time: 8 minutes 2023 年 7 月末に TAO Toolkit 5.0 がリリースされました。TAO Toolkit 5.0 ではいくつかの機能が追加されていますが、本記事ではデータの前処理、アノテーション、分析に役立つ TAO Data Service について記述します。Notebook に記載された一部のコマンドについて説明します。 TAO Data Service には 4 つの主要パイプラインがあります。 本記事の説明內容: TAO Data Service はこちらの Notebook で確認できます。TAO は TAO CLI を通して Docker を pull し、Docker 內で學習、推論などを実行します。 `~/.tao_mounts.

Source

]]> 2034 NVIDIA の GPU に最適化された YOLOv5 の実裝で物體検出アプリケーションを高速化する http://www.open-lab.net/ja-jp/blog/nvidia-yolo-v5-gpu-optimization/ Thu, 06 Jul 2023 08:26:50 +0000 http://www.open-lab.net/ja-jp/blog/?p=1753 Reading Time: 9 minutes はじめに 物體検出というと、コンピューター ビジョンの伝統的なアプローチは、検出したいオブジェクトの種類に応じたサイズのスライディング ウィンドウを使用して、畫像の左から右、上から下へと小さな一定サイズの領域を順次スキャ … Continued]]> Reading Time: 9 minutes 物體検出というと、コンピューター ビジョンの伝統的なアプローチは、検出したいオブジェクトの種類に応じたサイズのスライディング ウィンドウを使用して、畫像の左から右、上から下へと小さな一定サイズの領域を順次スキャンしていきます。スライディング ウィンドウの各位置で、物體分類器は、その領域內に興味深いオブジェクトがあるかどうかを判斷する必要があります。このアプローチは論理的ですが、CPU で実行すると非常に時間がかかります。GPU は、データ並列アルゴリズムを実裝する強力な機能を備えているため、推論を高速化することができ、この場合、異なるスライディング ウィンドウの位置で分類器を同時に実行します。 その後の物體検出のためのディープラーニング技術では、

Source

]]> 1753 NVIDIA Jetson Orin Nano 開発者キットで、 AI 搭載ロボットやスマート ビジョン システムなどを開発 http://www.open-lab.net/ja-jp/blog/develop-ai-powered-robots-smart-vision-systems-and-more-with-nvidia-jetson-orin-nano-developer-kit/ Tue, 21 Mar 2023 08:37:29 +0000 http://www.open-lab.net/ja-jp/blog/?p=1558 Reading Time: 4 minutes NVIDIA Jetson Orin Nano 開発者キットは、NVIDIA が GTC 2023 で発表したように、エントリーレベルの? AI? 搭載ロボット、スマート ドローン、インテリジェント ビジョン システムを … Continued]]> Reading Time: 4 minutes NVIDIA Jetson Orin Nano 開発者キットは、NVIDIA が GTC 2023 で発表したように、エントリーレベルの AI 搭載ロボット、スマート ドローン、インテリジェント ビジョン システムを作るための新しい基準となるものです。また、NVIDIA Jetson Orin Nano シリーズを使い始めることを簡素化します。コンパクトなデザイン、多數のコネクタ、最大 40TOPS の AI パフォーマンスにより、この開発者キットはビジョンを実現する最適な製品となります。 開発者キットは Jetson Orin Nano 8GB モジュールとリファレンス キャリア ボードで構成され、すべての NVIDIA Jetson Orin Nano および NVIDIA Jetson Orin NX…

Source

]]> 1558 NVIDIA、盜難防止のためのクラウドネイティブな Metropolis マイクロサービスと Retail AI Workflow を公開 http://www.open-lab.net/ja-jp/blog/nvidia-announces-cloud-native-metropolis-microservices-and-retail-ai-workflows-for-theft-prevention/ Thu, 12 Jan 2023 01:52:00 +0000 http://www.open-lab.net/ja-jp/blog/?p=1523 Reading Time: 2 minutes 小売業の「シュリンケージ被害」は深刻です。2021 年には業界全體の損害が 1,000 億ドルに達し、インフレの悪化がこれに拍車をかけています。ソフトウェア開発者が小売業の損害防止ソリューションの開発を加速できるように、 … Continued]]> Reading Time: 2 minutes 小売業の「シュリンケージ被害」は深刻です。2021 年には業界全體の損害が 1,000 億ドルに達し、インフレの悪化がこれに拍車をかけています。ソフトウェア開発者が小売業の損害防止ソリューションの開発を加速できるように、NVIDIA は一連のマイクロサービスを NVIDIA Metropolis の一部としてリリースし、あわせてRetail AI Workflow を公開しました。これらの AI ワークフローは、複數のカメラやバーコードスキャンによる識別を実現するための數十萬もの店舗商品への迅速なインデックス作成、値札の貼り換えや盜難検知といったアプリケーションとともに、事前トレーニングされた AI モデルを提供します。これらにより、迅速に開発が著手できるようになります。 このような複雑なソリューションを開発するには、

Source

]]> 1523 スマートな空間: エンドツーエンドの AI アプリケーションで工場の効率化を向上 http://www.open-lab.net/ja-jp/blog/smart-spaces-end-to-end-ai-application-boosts-factory-efficiency/ Mon, 09 Jan 2023 01:02:00 +0000 http://www.open-lab.net/ja-jp/blog/?p=1444 Reading Time: < 1 minute スマートな空間は、物理的な世界とデジタルな世界の間に継続的な情報の流れを作り出し、これまでにない価値を提供しています。 モノのインターネット (IoT: Internet of Things)、クラウド コンピューティン … Continued]]> Reading Time: < 1 minute スマートな空間は、物理的な世界とデジタルな世界の間に継続的な情報の流れを作り出し、これまでにない価値を提供しています。 モノのインターネット (IoT: Internet of Things)、クラウド コンピューティング、機械學習、AI などの技術をエッジに取り入れることで、世界的な企業はデジタル データを取り込み、実用的な知見や洞察に変えることができます。 しかし、閉鎖的なデータ センターの外に分散するエッジ環境では、プロセスが複雑になり、多くの拠點にまたがって管理する必要があります。 産業用の組み込みフラッシュおよび DRAM ソリューションのプロバイダーである Innodisk は、子會社の Aetina のスマート工場を構築しながら、これらの問題に対処しようとしました。Innodisk は、

Source

]]> 1444 NVIDIA Clara Holoscan SDK により、AI 醫療機器の超高速フレーム レートを実現 http://www.open-lab.net/ja-jp/blog/powering-ultra-high-speed-frame-rates-in-ai-medical-devices-with-clara-holoscan-sdk/ Wed, 21 Sep 2022 06:23:00 +0000 http://www.open-lab.net/ja-jp/blog/?p=966 Reading Time: 2 minutes 手術室では、手術用ビデオ ストリームの遅延や信頼性が、患者の転帰に大きな影響を與えることがあります。センサー入力からの超高速フレーム レートが実現する次世代 AI アプリケーションは、新次元のリアルタイムな認識と制御のし … Continued]]> Reading Time: 2 minutes 手術室では、手術用ビデオ ストリームの遅延や信頼性が、患者の転帰に大きな影響を與えることがあります。センサー入力からの超高速フレーム レートが実現する次世代 AI アプリケーションは、新次元のリアルタイムな認識と制御のしやすさを外科醫に提供することができます。 開発者が手術ナビゲーション、畫像誘導手術 (內視鏡などを利用)、醫療ロボットといったユース ケース向けの醫療機器にリアルタイムの AI 機能を組み込むには、複數のチャネルからの複合センサー データの低遅延処理に対応した AI パイプラインが必要です。 GTC 2022 で発表されたように、NVIDIA Clara Holoscan SDK v0.3 では、Emergent Vision Technologies 社の高速イーサネット対応カメラを採用したことにより、

Source

]]> 966 TAO Toolkit 3.22.05 アップデート: モデルの重み持ち込み + TensorBoard の可視化 http://www.open-lab.net/ja-jp/blog/tao-toolkit-byom-tensorboard/ Tue, 28 Jun 2022 01:40:45 +0000 http://www.open-lab.net/ja-jp/blog/?p=495 Reading Time: 2 minutes NVIDIA TAO Toolkit (以下: TAO) は Deep Learning モデルの學習を容易にし、枝刈り、量子化によって高速なモデルを提供可能にする機能をもっているソフトウェアです。 この記事は 2022 … Continued]]> Reading Time: 2 minutes NVIDIA TAO Toolkit (以下: TAO) は Deep Learning モデルの學習を容易にし、枝刈り、量子化によって高速なモデルを提供可能にする機能をもっているソフトウェアです。 この記事は 2022 年 6 月のアップデートで導入されたモデルの重み持ち込みと TensorBoard による可視化について記述します。 モデルの重みの持ち込みを TAO 上では BYOM と記述します。Bring your own model の略稱になります。 この機能によって他のフレームワークで學習された重みを TAO に持ち込むことができます。 TAO は NGC カタログに公開されている學習済みモデルを使用することができます。しかし公開されているモデルは人、車、

Source

]]> 495 Jetson のストレージ使用量の削減 http://www.open-lab.net/ja-jp/blog/minimizing-storage-usage-on-jetson/ Thu, 16 Jun 2022 10:37:00 +0000 http://www.open-lab.net/ja-jp/blog/?p=581 Reading Time: 2 minutes NVIDIA Jetson は、開発用に柔軟なストレージ オプション/コンフィギュレーションを提供していますが、よりコストを意識した大規模な製品展開のために、一部の Jetson モジュールには eMMC フラッシュ メ … Continued]]> Reading Time: 2 minutes NVIDIA Jetson は、開発用に柔軟なストレージ オプション/コンフィギュレーションを提供していますが、よりコストを意識した大規模な製品展開のために、一部の Jetson モジュールには eMMC フラッシュ メモリのストレージ サイズを制限して搭載しています。 NVIDIA JetPack、BSP、そして NVIDIA が Jetson 用にプリパッケージしたすべての開発ソフトウェアのフルセットを使用すると、最初は限られたストレージ領域にアプリケーションと必要なライブラリを収めるのは不可能だと思われるかもしれません。 しかし、不要なパッケージやライブラリ、その他のアセットを削除することで、 ディスク使用量を削減することができます。表 2 は、最新の NVIDIA JetPack のいくつかのバージョンで、8…

Source

]]> 581 人人超碰97caoporen国产