NVIDIA Isaac Sim
NVIDIA Isaac Sim ã¯ã€Omniverse を基盤ã¨ã™ã‚‹ã‚¹ã‚±ãƒ¼ãƒ©ãƒ–ルãªãƒãƒœãƒ†ã‚£ã‚¯ã‚¹ シミュレーション アプリケーションã€ãŠã‚ˆã³åˆæˆãƒ‡ãƒ¼ã‚¿ç”Ÿæˆãƒ„ールã§ã™ã€‚ç¾å ´ã‚’å¿ å®Ÿã«å†ç¾ã—ãŸãƒ•ã‚©ãƒˆãƒªã‚¢ãƒªã‚¹ãƒ†ã‚£ãƒƒã‚¯ãªä»®æƒ³ç’°å¢ƒã¯ã€AI ベースã®ãƒãƒœãƒƒãƒˆã®é–‹ç™ºã€ãƒ†ã‚¹ãƒˆã€ç®¡ç†ã«æœ€é©ã§ã™ã€‚
ãƒãƒ¼ã‚«ãƒ«ã§å®Ÿè¡Œ
クラウドã§å®Ÿè¡Œ
Isaac Sim を使用ã™ã‚‹ã¨ã€ä¸–ç•Œä¸ã®é–‹ç™ºè€…ã‚„ç ”ç©¶è€…ãŒ AI ãƒãƒœãƒƒãƒˆã‚’トレーニングã—ã€å¹…広ã„タスクã«åˆã‚ã›ã¦æœ€é©åŒ–ã™ã‚‹ã“ã¨ãŒã§ãã¾ã™ã€‚ã“ã®ãƒ‡ãƒ¢ã§ã¯ã‚·ãƒŸãƒ¥ãƒ¬ãƒ¼ã‚·ãƒ§ãƒ³ã§é–‹ç™ºã•ã‚Œã€å®Ÿä¸–ç•Œã§å®Ÿè¨¼ã•ã‚ŒãŸ3ã¤ã®éžå¸¸ã«ç•°ãªã‚‹ãƒãƒœãƒƒãƒˆã‚’紹介ã—ã¾ã™ã€‚
Isaac Sim ã®ãƒ€ã‚¤ã‚¢ã‚°ãƒ©ãƒ

2022.1ã®æ–°æ©Ÿèƒ½

Cortex
cobots ã®ã‚ˆã†ãªè¤‡é›‘ãªãƒãƒœãƒƒãƒˆã®ãƒ—ãƒã‚°ãƒ©ãƒŸãƒ³ã‚°å‹•ä½œã¯ã€å¸¸ã«èª²é¡Œã§ã—ãŸã€‚Cortex ã¯ã€ã“ã®ãƒ—ãƒã‚°ãƒ©ãƒŸãƒ³ã‚°ã‚¿ã‚¹ã‚¯ã‚’大幅ã«ç°¡ç´ 化ã™ã‚‹ Isaac Simã®æ„æ€æ±ºå®šãƒ•ãƒ¬ãƒ¼ãƒ ワークã§ã™ã€‚シミュレーションã§ä¸–ç•Œã®è¡¨ç¾ã‚’構築ã™ã‚‹ã“ã¨ã«ã‚ˆã‚Šã€ãƒãƒœãƒƒãƒˆã¯ãã®ç’°å¢ƒã‚’èªè˜ã—ã€å®Œäº†ã™ã‚‹ã‚ˆã†ã«è¨è¨ˆã•ã‚ŒãŸã‚¿ã‚¹ã‚¯ã«ã¤ã„ã¦æ±ºå®šã‚’下ã™ã“ã¨ãŒã§ãã¾ã™ã€‚
Isaac Cortex ã®è©³ç´° >
Gym
強化å¸ç¿’(RL) ã¯ã€è¤‡é›‘ãªã‚¿ã‚¹ã‚¯ã‚’実行ã™ã‚‹ãŸã‚ã®ãƒãƒœãƒƒãƒˆå·¥å¸ã«ãŠã‘る強力ãªæ©Ÿæ¢°å¸ç¿’方法ã§ã™ã€‚ãƒãƒœãƒƒãƒˆã¯ã€ã‚¿ã‚¹ã‚¯ã‚’完了ã—ã¦ã‚¹ã‚ルを習得ã™ã‚‹ãŸã‚ã«â€Gymâ€ã§ãƒˆãƒ¬ãƒ¼ãƒ‹ãƒ³ã‚°ã™ã‚‹ã“ã¨ãŒã§ãã¾ã™ã€‚Isaac Gymã¯ã€ãƒãƒœãƒƒãƒˆã®ãƒˆãƒ¬ãƒ¼ãƒ‹ãƒ³ã‚°æ™‚間を大幅ã«çŸç¸®ã™ã‚‹GPU アクセラレーション RL ツールã§ã™ã€‚
Omniverse Isaac Gym ã®è©³ç´° >
Omnigraph
ビジュアルプãƒã‚°ãƒ©ãƒŸãƒ³ã‚°ã¯ã€ã‚¢ãƒ—リケーションã®é–‹ç™ºã¨ãƒ‡ãƒãƒƒã‚°ã‚’ç°¡ç´ åŒ–ã§ãã¾ã™ã€‚Omnigraph ã¯ã€ãƒ“ジュアルスクリプティングã¨ãƒ—ãƒã‚°ãƒ©ãƒŸãƒ³ã‚°ã®ãŸã‚ã® Omniverse フレームワークã§ã™ã€‚ãƒãƒœãƒ†ã‚£ã‚¯ã‚¹ アプリケーションã¯ã€ç›¸äº’ã«æŽ¥ç¶šã•ã‚ŒãŸã•ã¾ã–ã¾ãªè¨ˆç®—ノードã¨ã—ã¦è¡¨ã•ã‚Œã‚‹ã“ã¨ãŒå¤šãã€ãƒ“ジュアルプãƒã‚°ãƒ©ãƒŸãƒ³ã‚°ã«ç‰¹ã«é©ã—ã¦ã„ã¾ã™ã€‚
Isaac Sim ã® Omnigraph ã®è©³ç´° >
Gazebo - Isaac Sim コãƒã‚¯ã‚¿
ROS 開発者ã¯ã€Ignition-Omniverse コãƒã‚¯ã‚¿ã‚’使用ã—ã¦ã€ã‚·ãƒŸãƒ¥ãƒ¬ãƒ¼ã‚·ãƒ§ãƒ³ã‚’Gazebo ã‹ã‚‰ Isaac Sim ã«ã€ã¾ãŸã¯ãã®é€†ã«ç§»å‹•ã§ãã¾ã™ã€‚ã“ã‚Œã«ã‚ˆã‚Šã€é–‹ç™ºè€…ã¯é©åˆ‡ãªã‚·ãƒŸãƒ¥ãƒ¬ãƒ¼ã‚·ãƒ§ãƒ³ タスクã«é©åˆ‡ãªã‚·ãƒŸãƒ¥ãƒ¬ãƒ¼ã‚¿ã‚’é¸æŠžã§ãã¾ã™
Isaac 㨠Gazebo を一緒ã«ä½¿ç”¨ã™ã‚‹æ–¹æ³•ã®è©³ç´° >リアルãªã‚·ãƒŸãƒ¥ãƒ¬ãƒ¼ã‚·ãƒ§ãƒ³
Omniverse プラットフォームã®å„ªã‚ŒãŸã‚·ãƒŸãƒ¥ãƒ¬ãƒ¼ã‚·ãƒ§ãƒ³ テクノãƒã‚¸ã‚’活用ã™ã‚‹ Isaac Sim ã¯ã€Phys X 5 ã«ã‚ˆã‚‹ GPU ã®é«˜åº¦ãªç‰©ç†ã‚·ãƒŸãƒ¥ãƒ¬ãƒ¼ã‚·ãƒ§ãƒ³ã€ãƒªã‚¢ãƒ«ã‚¿ã‚¤ãƒ ã®ãƒ¬ã‚¤ トレーシングã¨ãƒ‘ス トレーシングã«ã‚ˆã‚‹ãƒ•ã‚©ãƒˆãƒªã‚¢ãƒªã‚¹ãƒ†ã‚£ãƒƒã‚¯ãªæ˜ åƒã€MDL マテリアル定義ã«ã‚ˆã‚‹å®Ÿç‰©ãƒ™ãƒ¼ã‚¹ã®ãƒ¬ãƒ³ãƒ€ãƒªãƒ³ã‚°ãªã©ã‚’実ç¾ã—ã¾ã™ã€‚
幅広ã„用途ã«å¯¾å¿œã™ã‚‹ãƒ¢ã‚¸ãƒ¥ãƒ©ãƒ¼åž‹ã‚¢ãƒ¼ã‚テクãƒãƒ£
å˜é«”ã®ã‚·ãƒŸãƒ¥ãƒ¬ãƒ¼ã‚¿ãƒ¼ã§ã¯ã€ã™ã¹ã¦ã®ãƒãƒœãƒ†ã‚£ã‚¯ã‚¹ シミュレーションã®èª²é¡Œã«å¯¾å‡¦ã™ã‚‹ã®ã¯å›°é›£ã§ã™ã€‚ã—ã‹ã—ã€Isaac Sim ã¯ã€æ“作ã€ãƒŠãƒ“ゲーションã€ãƒˆãƒ¬ãƒ¼ãƒ‹ãƒ³ã‚° データã®åˆæˆãƒ‡ãƒ¼ã‚¿ç”Ÿæˆãªã©ã€ã»ã¨ã‚“ã©ã®ä¸€èˆ¬çš„ãªãƒãƒœãƒ†ã‚£ã‚¯ã‚¹ ユース ケースã«å¯¾å¿œã§ãるよã†æ§‹ç¯‰ã•ã‚Œã¦ã„ã¾ã™ã€‚ã¾ãŸã€ãƒ¢ã‚¸ãƒ¥ãƒ©ãƒ¼åž‹ã®ãŸã‚ã€ãƒ„ールをカスタマイズã—ã¦ã•ã¾ã–ã¾ãªæ–°ã—ã„ユース ケースã«æ‹¡å¼µã§ãã¾ã™ã€‚
シームレスãªæŽ¥ç¶šæ€§ã¨ç›¸äº’é‹ç”¨æ€§
Omniverse を基盤ã¨ã™ã‚‹ Isaac Sim ã¯ã€Omniverse Nucleus 㨠Omniverse Connectors を利用ã§ãã‚‹ãŸã‚ã€Pixar USD ã§ã®ç’°å¢ƒãŠã‚ˆã³ãƒãƒœãƒƒãƒˆ モデルã®å…±åŒæ§‹ç¯‰ã€å…±æœ‰ã€ã‚¤ãƒ³ãƒãƒ¼ãƒˆãŒå¯èƒ½ã§ã™ã€‚
Isaac SDK 㨠ROS/ROS2 インターフェイスã€ãƒ•ãƒ«æ©Ÿèƒ½ã® Python スクリプトã€ãƒãƒœãƒƒãƒˆãŠã‚ˆã³ç’°å¢ƒãƒ¢ãƒ‡ãƒ«ã®ã‚¤ãƒ³ãƒãƒ¼ãƒˆç”¨ãƒ—ラグインを利用ã™ã‚Œã°ã€ãƒãƒœãƒƒãƒˆã®é 脳を仮想世界ã«ç°¡å˜ã«æŽ¥ç¶šã§ãã¾ã™ã€‚
èªè˜ãƒ¢ãƒ‡ãƒ«ã®ãƒˆãƒ¬ãƒ¼ãƒ‹ãƒ³ã‚°ç”¨ã«åˆæˆãƒ‡ãƒ¼ã‚¿ã‚’生æˆ
èªè˜ãƒ¢ãƒ‡ãƒ«ã®ãƒˆãƒ¬ãƒ¼ãƒ‹ãƒ³ã‚°ã«ã¯ã€è†¨å¤§ãªé‡ã¨ç¨®é¡žã®ãƒ‡ãƒ¼ã‚¿ã‚»ãƒƒãƒˆãŒå¿…è¦ã«ãªã‚Šã¾ã™ã€‚å分ãªãƒ‡ãƒ¼ã‚¿ã‚»ãƒƒãƒˆã‚’åŽé›†ã™ã‚‹ã«ã¯ã€ã‚³ã‚¹ãƒˆã¨æ™‚é–“ãŒã‹ã‹ã‚‹ã†ãˆã€ã¨ãã«å±é™ºã‚’ä¼´ã„ã€ä¸å¯èƒ½ãªå ´åˆã‚‚ã‚ã‚Šã¾ã™ã€‚Isaac Sim ã®åˆæˆãƒ‡ãƒ¼ã‚¿ç”Ÿæˆæ©Ÿèƒ½ã‚’利用ã™ã‚Œã°ã€é–‹ç™ºè€…ã¯ãƒˆãƒ¬ãƒ¼ãƒ‹ãƒ³ã‚° タスクを自å‰ã§è¡Œãˆã‚‹ã‚ˆã†ã«ãªã‚Šã¾ã™ã€‚プãƒã‚¸ã‚§ã‚¯ãƒˆã®åˆæœŸæ®µéšŽã§ã€æ¦‚å¿µå®Ÿè¨¼ã‚’åŠ é€Ÿã—ãŸã‚Šã€ML ワークフãƒãƒ¼ã‚’検証ã—ãŸã‚Šã™ã‚‹éš›ã«åˆæˆãƒ‡ãƒ¼ã‚¿ã‚’利用ã§ãã¾ã™ã€‚開発サイクルã®å¾ŒæœŸã«ã¯ã€å®Ÿéš›ã®ãƒ‡ãƒ¼ã‚¿ã‚’補強ã™ã‚‹ãŸã‚ã«åˆæˆãƒ‡ãƒ¼ã‚¿ã‚’使ã†ã“ã¨ã§ã€é‹ç”¨ãƒ¢ãƒ‡ãƒ«ã®ãƒˆãƒ¬ãƒ¼ãƒ‹ãƒ³ã‚°æ™‚é–“ã‚’çŸç¸®ã§ãã¾ã™ã€‚Isaac Sim ã«ã¯ãƒ‰ãƒ¡ã‚¤ãƒ³ ランダマジェーションãŒçµ„ã¿è¾¼ã¾ã‚Œã¦ã„ã‚‹ãŸã‚ã€ãƒ†ã‚¯ã‚¹ãƒãƒ£ã€è‰²ã€ç…§æ˜Žã€é…置を変更ã™ã‚‹ã“ã¨ãŒã§ãã¾ã™ã€‚ã¾ãŸã€ãƒã‚¦ãƒ³ãƒ‡ã‚£ãƒ³ã‚° ボックスã€æ·±åº¦ã€ã‚»ã‚°ãƒ¡ãƒ³ãƒ†ãƒ¼ã‚·ãƒ§ãƒ³ãªã©ã€ã•ã¾ã–ã¾ãªç¨®é¡žã®ãƒ‡ãƒ¼ã‚¿ã‚’サãƒãƒ¼ãƒˆã—ã¦ã„ã¾ã™ã€‚データセット㯠KITTI å½¢å¼ã§å‡ºåŠ›ã§ãã‚‹ãŸã‚ã€NVIDIA ã® TAO Toolkitã‚’ç°¡å˜ã«æ´»ç”¨ã§ãã¾ã™ã€‚
æ“作シミュレーション
ãƒãƒœãƒƒãƒˆã®ä¸»è¦ãªå¿œç”¨åˆ†é‡Žã® 1 ã¤ã«ã€ç‰©é«”ã‚’è˜åˆ¥ã—ã€æŒã¡ä¸Šã’ã¦å‹•ã‹ã™ãƒžãƒ‹ãƒ”ュレーターãŒã‚ã‚Šã¾ã™ã€‚最新ã®å·¥å ´ã‚„倉庫環境ã§ã¯ã€è³‡æã®é‹æ¬ã‚„é¸åˆ¥ã«ãƒžãƒ‹ãƒ”ュレーターを利用ã™ã‚‹ã“ã¨ã§ã€ä½œæ¥åŠ¹çŽ‡ã¨ã‚¹ãƒ«ãƒ¼ãƒ—ットを大幅ã«å‘上ã§ãã¾ã™ã€‚Isaac Sim ã«ã¯ã€å®¹å™¨ã®å……填や段ç©ã¿ã¨ã„ã£ãŸä¸€èˆ¬çš„ãªã‚¿ã‚¹ã‚¯ã®ã‚µãƒ³ãƒ—ルãŒçµ„ã¿è¾¼ã¾ã‚Œã¦ã„ã¾ã™ã€‚Python ベースã®ã“れらã®ã‚µãƒ³ãƒ—ルã¯ã€å¤‰æ›´ã—ã¦ã‚«ã‚¹ã‚¿ãƒ タスクã«ã‚‚利用ã§ãã¾ã™ã€‚UR10ã€Frank Emika Panda (Leonardo)ã€ä½Žã‚³ã‚¹ãƒˆã® DofBot ã¨ã„ã£ãŸãƒžãƒ‹ãƒ”ュレーター ãƒãƒœãƒƒãƒˆã‚’サãƒãƒ¼ãƒˆã—ã¦ãŠã‚Šã€ãƒ—ãƒã‚¸ã‚§ã‚¯ãƒˆã‚’ã™ã°ã‚„ã開始ã§ãã¾ã™ã€‚
Isaac ã®ãƒžãƒ‹ãƒ”ュレーション サãƒãƒ¼ãƒˆã®è©³ç´°ã‚’見る ?
Isaac Sim ã¸ã®ãƒãƒœãƒƒãƒˆã¾ãŸã¯ã‚¢ã‚»ãƒƒãƒˆã®ã‚¤ãƒ³ãƒãƒ¼ãƒˆ
ãƒãƒœãƒƒãƒˆ モデルãªã©ã®ã‚¢ã‚»ãƒƒãƒˆã‚’ãƒãƒœãƒ†ã‚£ã‚¯ã‚¹ シミュレーターã«ã‚¤ãƒ³ãƒãƒ¼ãƒˆã™ã‚‹ã“ã¨ã¯ã€é‡è¦ãªä½œæ¥ã§ã‚ã‚‹ã¨åŒæ™‚ã«ã€ãƒˆãƒ¬ãƒ¼ãƒ‹ãƒ³ã‚°ã‚„テスト シナリオã®æº–å‚™ã«ãŠã‘る大ããªèª²é¡Œã§ã‚‚ã‚ã‚Šã¾ã™ã€‚Omniverse ã®å¼·åŠ›ãªã‚³ãƒã‚¯ã‚¿æ©Ÿèƒ½ã‚’活用ã™ã‚‹ Isaac Sim ã¯ã€ä¸»è¦ãªè£½å“è¨è¨ˆãƒ•ã‚©ãƒ¼ãƒžãƒƒãƒˆã‚’サãƒãƒ¼ãƒˆã—ã¦ã„ã¾ã™ã€‚高度㪠URDF インãƒãƒ¼ãƒˆ ツールã¯ã€è¤‡æ•¸ã®ãƒãƒœãƒƒãƒˆ モデルã§ãƒ†ã‚¹ãƒˆæ¸ˆã¿ã§ã™ã€‚ã¾ãŸ CAD ファイルã¯ã€Onshape ã‹ã‚‰ã®ç›´æŽ¥ã‚¤ãƒ³ãƒãƒ¼ãƒˆã®ã»ã‹ã€STEP ファイルã‹ã‚‰ã‚‚最å°é™ã®å¾Œå‡¦ç†ã ã‘ã§ã‚¤ãƒ³ãƒãƒ¼ãƒˆå¯èƒ½ã§ã™ã€‚
hapeNet をサãƒãƒ¼ãƒˆã—ã¦ã„ã‚‹ Isaac Sim ã¯ã€ã•ã¾ã–ã¾ãªç’°å¢ƒã«ç°¡å˜ã«ã‚¢ã‚»ãƒƒãƒˆã‚’è¿½åŠ ã§ãã¾ã™ã€‚ShapeNet インãƒãƒ¼ãƒˆ ツールを使ã†ã¨ã€è†¨å¤§ãªé‡ã® 3D アセットã«ã‚¢ã‚¯ã‚»ã‚¹ã§ãã¾ã™ã€‚
Onshape インãƒãƒ¼ãƒˆ ツールã®ä½¿ç”¨ã«é–¢ã™ã‚‹è©³ç´°æƒ…å ±ã‚’è¦‹ã‚‹ ?
STEP インãƒãƒ¼ãƒˆ ツールã®ä½¿ç”¨ã«é–¢ã™ã‚‹è©³ç´°æƒ…å ±ã‚’è¦‹ã‚‹?
Isaac Sim ã®æ´»ç”¨ä¾‹

物æµè‡ªå‹•åŒ–ã®ãŸã‚ã® Sim-to-Real ã®æœ€é©åŒ–
IML 社 ãƒ•ãƒ©ã‚¦ãƒ³ãƒ›ãƒ¼ãƒ•ã‚¡ãƒ¼æ° ã® GTC 2022 プレゼンテーション >
Isaac Cortex: 仮想ã¨ç‰©ç†ãƒãƒœãƒƒãƒˆã®ãŸã‚ã®æ„æ€æ±ºå®šãƒ•ãƒ¬ãƒ¼ãƒ ワーク
GTC 2022 トーク>ãƒãƒ¥ãƒ¼ãƒˆãƒªã‚¢ãƒ«
å…¨ãƒãƒ¥ãƒ¼ãƒˆãƒªã‚¢ãƒ«ã®ãƒ—レイリスト㯠ã“ã¡ã‚‰
ãƒãƒœãƒƒãƒˆã‚’ Isaac Sim ã«ã‚¤ãƒ³ãƒãƒ¼ãƒˆ
OnShape インãƒãƒ¼ãƒˆ ツール㨠Isaac Sim
Isaac Sim ã®ãƒ‡ã‚¸ã‚¿ãƒ« ツイン
Isaac Sim ã®æ–°è‘—æƒ…å ±

Isaac Sim 用 Omniverse Replicator
åˆæˆãƒ‡ãƒ¼ã‚¿ã‚’トレーニングã«ä½¿ç”¨ã—ã¦æœ¬ç•ªå“質ã®ãƒ“ジョンベース㮠AI モデルをデプãƒã‚¤ã—ãŸå®Ÿéš›ä¾‹ã‚’åƒè€ƒã«ã—ã¾ã—ょã†ã€‚
ブãƒã‚°è¨˜äº‹ã‚’èªã‚€ >
Isaac Sim/Trimble ã®åˆæˆãƒ‡ãƒ¼ã‚¿
Isaac Sim ã«ã‚ˆã‚‹ãƒãƒœãƒƒãƒˆã®ãƒˆãƒ¬ãƒ¼ãƒ‹ãƒ³ã‚°ç”¨åˆæˆãƒ‡ãƒ¼ã‚¿ç”Ÿæˆã«é–¢ã™ã‚‹ Trimble ã®å–り組ã¿ã«ã¤ã„ã¦ãŠèªã¿ãã ã•ã„。
ブãƒã‚°è¨˜äº‹ã‚’èªã‚€ >
NVIDIA/Open Robotics ã«é–¢ã™ã‚‹ãƒ‹ãƒ¥ãƒ¼ã‚¹
NVIDIA 㨠Open Robotics 㯠ROS ã®é–‹ç™ºè€…コミュニティ㫠NVIDIA テクノãƒã‚¸ã‚’æä¾›ã™ã‚‹ãŸã‚ã«æ攜ã™ã‚‹ã“ã¨ã‚’発表ã—ã¾ã—ãŸã€‚
Read Blog > ブãƒã‚°è¨˜äº‹ã‚’èªã‚€ãƒªã‚½ãƒ¼ã‚¹
今ã™ã Isaac Sim を始ã‚ã¾ã—ょã†
Isaac Sim アプリを見ã¤ã‘ã¦ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«
Omniverse をダウンãƒãƒ¼ãƒ‰
コンテナーã¨ã‚¯ãƒ©ã‚¤ã‚¢ãƒ³ãƒˆã‚’ダウンãƒãƒ¼ãƒ‰