李飛飛氏のチーム、1本の動画から無限のロボット訓練場を生成する手法を発表
エンボディッド・インテリジェンスにおいて、シミュレーションと現実のギャップを埋めること――いわゆる「Sim2Real」――は、長年にわたり解決すべき課題として残されてきました。シミュレーション環境の構築には多額の費用がかかり、また、物理的な環境にモデルを導入すると、その性能が低下してしまうことが頻繁にあります。 李飛飛(Li Fei-Fei)氏のチーム、NVIDIA GEAR Lab、ジョージア工科大学による最近の共同研究では、画期的な解決策「Real2Sim」が提案された。
「SimFoundry」と名付けられたこのシステムは、単純な実世界の動画を用いて、インタラクティブで、学習可能かつテスト可能なロボットシミュレーションを生成します。従来の3D再構築の枠を超え、SimFoundryはディープシーン解析を行い、環境生成を自動化することで、シミュレーション構築に必要な労力を大幅に削減します。

SimFoundryの核心となる革新は、「デジタルツイン」と「デジタルカズン」の間の閉ループにあります。 このシステムは、動画から幾何学的、物理的、およびインタラクティブなデータを抽出し、高忠実度のデジタルツインを構築します。その後、外観、レイアウト、タスクを自動的に変化させて、多様なデジタルカズンを生成します。これにより、開発者は1本の動画から事実上無制限のトレーニングデータを導き出し、シミュレーション内でのエンドツーエンドの戦略学習と評価が可能になります。
実験により、SimFoundryの強力な予測能力が実証されており、シミュレーション上のロボットのパフォーマンスは実世界の結果と密接に一致しています。特に重要なのは、この合成データで学習された戦略が、微調整(「ゼロショット」)なしに現実世界に効果的に転移し、多段階操作や両腕の協調動作といった複雑なタスクにおいて優れた性能を発揮する点です。
NVIDIA GEAR LabやLi Fei-Fei氏のチームの主要メンバーを含む、ロボット工学の第一人者たちが共同執筆したこのオープンソースシステムは、体現型AIの開発に革命をもたらすことが期待されています。コストのかかる手作業によるデータ収集を生成技術に置き換えることで、ロボットは実験室から実世界での応用へと、これまでよりもはるかに迅速に移行できるようになりました。
論文リンク:https://arxiv.org/pdf/2606.28276v1
関連記事
Anthropic、Claude Mythosをリリースし、簡潔な証明でエルデシュ予想を解決
5月26日、AnthropicのエンジニアであるSholto DouglasはX上で、最新のモデル「Claude Mythos」が組合せ幾何学における百年の謎、すなわちErdős単位距離予想を解いたと発表した。この「賢明かつ簡潔な証明」と称される画期的な成果は、OpenAIがGPT-5.5が同じマイルストーンを解決したと主張した直後に得られたもので、純粋な数学的発見におけるトップAI研究所間の激化する競争を浮き彫りにした。この成果は、従来の単一モデル手法とは異なる協調型エージェントのアプローチを
Amazon、Decartを70億ドルで買収し、主要なAIチップアダプターの確保に成功
ウォール・ストリート・ジャーナル紙によると、アマゾンはAIスタートアップのDecartを買収するために交渉を行っており、その評価額は推定70億ドルに達している。競合入札がない場合、この取引はまもなく完了する可能性があり、これは継続するチップ供給制約の中で主要なテクノロジー企業が計算資源を確保することに急務であることを示している。Decartのクロスチップソフトウェアの重要性サンフランシスコを拠点とするDecartは、開発者が摩擦なく異なるハードウェア間でAIモデルを移行できるようにする互換性
Locusがロボット工学における最大の課題の一つである「マニピュレーション」にどう取り組んでいるか
NeuraGraspは、小型容器、多孔質のポリ袋、繊維製品など、さまざまな物品を扱います。 | 出典:Locus RoboticsLocus Robotics社は、実際の運用環境において数多くのロボット技術上の課題を解決してきました。同社の自律移動ロボット(AMR)は、さまざまな施設内で広範囲を移動し、60億回以上のピッキングを支援してきました。現在、同社はロボットによるマニピュレーション分野へと
関連特集おすすめ
コメント (0)
0/500
エンボディッド・インテリジェンスにおいて、シミュレーションと現実のギャップを埋めること――いわゆる「Sim2Real」――は、長年にわたり解決すべき課題として残されてきました。シミュレーション環境の構築には多額の費用がかかり、また、物理的な環境にモデルを導入すると、その性能が低下してしまうことが頻繁にあります。 李飛飛(Li Fei-Fei)氏のチーム、NVIDIA GEAR Lab、ジョージア工科大学による最近の共同研究では、画期的な解決策「Real2Sim」が提案された。
「SimFoundry」と名付けられたこのシステムは、単純な実世界の動画を用いて、インタラクティブで、学習可能かつテスト可能なロボットシミュレーションを生成します。従来の3D再構築の枠を超え、SimFoundryはディープシーン解析を行い、環境生成を自動化することで、シミュレーション構築に必要な労力を大幅に削減します。

SimFoundryの核心となる革新は、「デジタルツイン」と「デジタルカズン」の間の閉ループにあります。 このシステムは、動画から幾何学的、物理的、およびインタラクティブなデータを抽出し、高忠実度のデジタルツインを構築します。その後、外観、レイアウト、タスクを自動的に変化させて、多様なデジタルカズンを生成します。これにより、開発者は1本の動画から事実上無制限のトレーニングデータを導き出し、シミュレーション内でのエンドツーエンドの戦略学習と評価が可能になります。
実験により、SimFoundryの強力な予測能力が実証されており、シミュレーション上のロボットのパフォーマンスは実世界の結果と密接に一致しています。特に重要なのは、この合成データで学習された戦略が、微調整(「ゼロショット」)なしに現実世界に効果的に転移し、多段階操作や両腕の協調動作といった複雑なタスクにおいて優れた性能を発揮する点です。
NVIDIA GEAR LabやLi Fei-Fei氏のチームの主要メンバーを含む、ロボット工学の第一人者たちが共同執筆したこのオープンソースシステムは、体現型AIの開発に革命をもたらすことが期待されています。コストのかかる手作業によるデータ収集を生成技術に置き換えることで、ロボットは実験室から実世界での応用へと、これまでよりもはるかに迅速に移行できるようになりました。
論文リンク:https://arxiv.org/pdf/2606.28276v1
Anthropic、Claude Mythosをリリースし、簡潔な証明でエルデシュ予想を解決
5月26日、AnthropicのエンジニアであるSholto DouglasはX上で、最新のモデル「Claude Mythos」が組合せ幾何学における百年の謎、すなわちErdős単位距離予想を解いたと発表した。この「賢明かつ簡潔な証明」と称される画期的な成果は、OpenAIがGPT-5.5が同じマイルストーンを解決したと主張した直後に得られたもので、純粋な数学的発見におけるトップAI研究所間の激化する競争を浮き彫りにした。この成果は、従来の単一モデル手法とは異なる協調型エージェントのアプローチを
Amazon、Decartを70億ドルで買収し、主要なAIチップアダプターの確保に成功
ウォール・ストリート・ジャーナル紙によると、アマゾンはAIスタートアップのDecartを買収するために交渉を行っており、その評価額は推定70億ドルに達している。競合入札がない場合、この取引はまもなく完了する可能性があり、これは継続するチップ供給制約の中で主要なテクノロジー企業が計算資源を確保することに急務であることを示している。Decartのクロスチップソフトウェアの重要性サンフランシスコを拠点とするDecartは、開発者が摩擦なく異なるハードウェア間でAIモデルを移行できるようにする互換性





家






