NVIDIA launches new services, models and computing platforms to accelerate the development of humanoid robots

The rapid development of technology is gradually turning humanoid robots from the "anthropomorphism" of form to the practicality of function, thereby accelerating product commercialization and market expansion. NVIDIA has been actively researching and developing artificial intelligence and robotics technology, especially in the field of humanoid robots. NVIDIA is committed to accelerating the development and innovation of humanoid robots worldwide through platforms such as NVIDIA Isaac and NVIDIA Jetson. In order to accelerate the development of humanoid robots worldwide, at SIGGRAPH 2024, NVIDIA officially announced a set of services, models and computing platforms for global robot manufacturers, AI model developers and software manufacturers to develop, train and build the next generation of humanoid robots .

完全な製品スイートには、ロボット工学のシミュレーションと学習のための新しい NVIDIA NIM™ マイクロサービスとフレームワーク、多段階のロボット工学ワークロードを実行するための NVIDIA OSMO オーケストレーション サービス、研究者が少量の人力を使用して開発を可能にする AI とシミュレーション対応のリモート オペレーション ワークフローが含まれています。ロボットを訓練するためのデモンストレーション データ。
トレーニングとシミュレーションのワークフローを簡素化し、導入と開発サイクルを短縮します
NVIDIA NIM (NVIDIA Inference Manager) は、AI モデルの推論プロセスを管理および最適化するために NVIDIA が提供するツールです。 NIM は、開発者や企業が AI 推論アプリケーションをより効率的に展開、拡張、維持できるように設計されています。
開発者による製品開発の加速を支援するために、NVIDIA は NIM マイクロサービスの NVIDIA 推論ソフトウェアを利用した事前構築済みコンテナーを提供し、開発者が展開時間を数週間から数分に短縮できるようにします。ロボット工学の専門家は、2 つの新しい AI マイクロサービスを通じて、NVIDIA Omniverse™ プラットフォーム上に構築されたロボット工学シミュレーション リファレンス アプリケーションである NVIDIA Isaac Sim™m の生成物理 AI シミュレーション ワークフローを強化できるようになります。
さらに、MimicGen NIM は、Apple Vision Pro などの空間コンピューティング デバイスによって記録された遠隔操作データに基づいて合成モーション データを生成できます。 RobocasaNIM は、3D 世界で開発およびコラボレーションするためのユニバーサル フレームワークである OpenUSD でロボット タスクとシミュレーション対応環境を生成します。
現在利用可能な NVIDIA OSMO は、ユーザーがオンプレミスかクラウドかに関係なく、分散コンピューティング リソース全体で複雑なロボティクス開発ワークフローを調整および拡張できるようにするクラウドネイティブのマネージド サービスです。
OSMO はロボットのトレーニングとシミュレーションのワークフローを大幅に簡素化し、導入と開発のサイクルを数か月から 1 週間以内に短縮します。ユーザーは、合成データの生成、モデルのトレーニング、強化学習、人型ロボット、自律移動ロボット、産業用マニピュレーターの大規模なソフトウェアインザループテストなど、さまざまなタスクを視覚的に管理できます。
見つけるのは難しくありません。
実際のデータと合成データを使用して時間を節約し、コストを削減します
人型ロボットの基本モデルのトレーニングには大量のデータが必要です。遠隔操作は人間によるデモンストレーションデータを取得する方法の 1 つですが、そのプロセスはますます高価かつ長期化しています。
SIGGRAPH コンピューター グラフィックス カンファレンスでデモンストレーションされた NVIDIA Al および Omniverse のリモート操作リファレンス ワークフローを使用すると、研究者と AI 開発者は、リモートでキャプチャされた非常に少数の人間のデモンストレーションから大量の合成モーション データと知覚データを生成できます。
まず、開発者は Apple Vision pro を使用して少数のリモート操作デモンストレーションをキャプチャし、次にこれらの記録を NVIDIA lsaac Sim でシミュレートし、MimicGen NIM を使用して記録に基づいて合成データ セットを生成しました。
開発者は、実際のデータと合成データを使用して Proiect GROOT 人型ロボットの基本モデルをトレーニングし、時間を節約し、コストを削減できます。その後、ロボット学習フレームワークである Isaac Lab の Robocasa NIM を使用して、エクスペリエンスを生成し、ロボット モデルを再トレーニングできます。ワークフロー全体を通じて、NVIDIAOSMO はコンピューティング タスクをさまざまなリソースにシームレスに割り当て、開発者の数週間にわたる管理作業負荷を節約します。
総合ロボットプラットフォーム企業であるフーリエは、シミュレーション技術を利用して学習データを包括的に生成する利点を認識しています。
フーリエの Alex Gu 氏は、人型ロボットの開発は非常に複雑であり、この作業には現実世界から大量の実データを収集する手間のかかる作業が必要であると述べました。 NVIDIA の新しいシミュレーションおよび生成 AI 開発者ツールは、モデル開発ワークフローを導き、加速するのに役立ちます。
開発者のテクノロジー アクセス チャネルを拡大し、ヒューマノイド ロボットの開発を簡素化します
NVIDIA は、ヒューマノイド ロボットの開発を簡素化するための 3 つのコンピューティング プラットフォームを提供します。つまり、モデルをトレーニングするための NVIDIA AI スーパーコンピューター、ロボットを可能にする 0mniverse 上に構築された NVIDIA lsaac Sim。シミュレートされた世界で完成し、モデルの実行には NVIDIA Jetson™ Thor ヒューマノイド ロボット コンピューターが使用されます。開発者は、特定のニーズに基づいてプラットフォーム全体またはその一部にアクセスして使用できます。新しい NVIDIA ヒューマノイド ロボット開発者プログラムを通じて、開発者はこれらの新製品に加え、NVIDIA lsaac Sim、NVIDIA lsaac Lab、Jetson Thor、Project GR00T ユニバーサル ヒューマノイド ロボット ベース モデルの新バージョンに早期にアクセスできるようになります。
早期アクセス プログラムに最初に参加する企業は、1x、Boston Dynamics、ByteDance Research、FieldAl、Figure、Fourier、Galaxy General、Zhuji Dynamics、Mentee、Neura Robotics、Star Dynamics、Skild Al です。
Boston Dynamics の Aaron Saunders 氏は次のように述べています。「Boston Dynamics と NVIDIA は、ロボット技術の進歩において緊密に協力してきた長い歴史を持っています。この取り組みの結果が業界全体で 33 件の開発を加速させていることを非常に嬉しく思います。」現在、開発者は NVIDIA ヒューマノイド ロボット開発者プログラムに参加して NVIDIA OSMO および lsaac Lab にアクセスできるようになり、間もなく NVIDIA NIM マイクロサービスにアクセスできるようになります。人工知能、機械学習、ロボット工学のさらなる発展により、上記の分野での応用はより広範囲かつ奥深くなるでしょう。
NVIDIA Huang Renxun 氏が述べたように、次の分野ではヒューマノイド ロボットの機能と応用範囲が拡大します。 AI のステップの 1 つはロボット工学であり、最もエキサイティングな開発の 1 つは人型ロボットです。NVIDIA は、NVIDIA Robotics スタック全体を進化させ、世界中の人型ロボット開発者や企業にアクセスを開放し、ニーズに合ったプラットフォーム、アクセラレーション ライブラリ、AI モデルへのアクセスを提供します。

The above is the detailed content of NVIDIA launches new services, models and computing platforms to accelerate the development of humanoid robots. For more information, please follow other related articles on the PHP Chinese website!