System 2(低速思考) : 環境や指示を分析して行動を計画する論理的思考 複雑なタスクを段階的に計画 何ができるのか: 新しい環境や作業スペースの構成により柔軟に適応でき、ユーザーの指示によってオブジェクトを認識することも可能 オブジェクトの仕分けや収納といった一般的なマテリアルハンドリングや製造業務における成功率が大幅に向上 GR00T-Dreams - 「想像力」でデータを生成 仕組み: 1枚の画像を入力として使用し、GR00T-Dreamsは新しい環境で新しいタスクを実行するロボットの動画を生成 アクショントークン(圧縮された消化可能なデータ片)を抽出し、ロボットにこれらの新しいタスクの実行方法を教える 驚異的な効率: GR00T N1.5はわずか36時間で開発され、これは人間が手作業でデータを収集した場合にほぼ3か月かかる作業に相当 11時間で78万件の合成軌跡(人間のデモ約6,500時間分、約9ヶ月に相当)を生成 実データのみの場合と比較して40%のパフォーマンス向上を達成 . データ生成の3つのワークフロー GR00T-Teleop: Apple Vision Proを利用してデジタルツインで人間の動作をキャプチャし、これらの人間の動作はシミュレーションでロボットによって模倣され、グラウンドトゥルースとし て使用するために記録される GR00T-Mimic: キャプチャされた人間のデモンストレーションをより大きな合成モーションデータセットに増幅 わずか数回の人間のデモンストレーションをもとに、ロボット操作向けの飛躍的に大量の合成モーション軌道を生成 GR00T-Gen: NVIDIAOmniverseとNVIDIA Cosmosプラットフォーム上に構築され、ドメインランダム化と3Dアップスケーリングを通じてこのデータセットを指数関数的に拡張 .補完技術とツール Cosmos Reason: 思考連鎖リーズニングを活用してフィジカルAIモデルトレーニング用の正確で高品質な合成データをキュレーションする新しい世界基盤モデル Isaac Sim 5.0 & Isaac Lab 2.2: シミュレーションおよび合成データ生成フレームワークで、開発者がGR00T Nモデルをテストするのを支援する新しい評価環境が含まれる Newton物理エンジン: Google DeepMindとDisney Researchと共同で開発中の、ロボット開発のために構築されたオープンソースの物理エンジン NVIDIAのヒューマノイドロボット向けプラットフォーム Isaac GR00T