Daily Arxiv

世界中で発行される人工知能関連の論文をまとめるページです。
このページはGoogle Geminiを活用して要約し、非営利で運営しています。
論文の著作権は著者および関連機関にあり、共有する際は出典を明記してください。

X-Sim: Cross-Embodiment Learning via Real-to-Sim-to-Real

Created by
  • Haebom

作者

Prithwish Dan, Kushal Kedia, Angela Chao, Edward Weiyi Duan, Maximus Adrian Pace, Wei-Chiu Ma, Sanjiban Choudhury

概要

この論文は、X-Simという実際のシミュレーション - リアル(real-to-sim-to-real)フレームワークを提案します。 X-Simは人の動きを模倣するのではなく、RGBD画像からオブジェクトの動きを抽出してオブジェクト中心の補償を定義し、それを強化学習(RL)エージェント学習に活用します。シミュレーションで学習されたポリシーは、さまざまな視点と照明でレンダリングされた合成ロールアウトを使用して、画像条件付き拡散ポリシーに蒸留されます。実際の環境に移行するために、オンラインドメイン適応技術を使用して、実際とシミュレーションの観測値をソートします。ロボットの遠隔操作データがなくても、5つの操作作業で平均30%向上した性能を示し、従来の方法より10倍少ないデータ収集時間で同じ性能を達成し、新しいカメラ視点とテスト時間変化にも一般化されることを示しています。

Takeaways、Limitations

Takeaways:
人の動きを模倣することなく、ロボットの操作方針学習が可能であることを示しています。
オブジェクト中心の補償を使用した実際のシミュレーション間の遷移性能の向上
オンラインドメイン適応技術による実環境適用性の向上
データ収集時間の短縮と一般化性能の向上
Limitations:
RGBD画像データに依存しています。
シミュレーション環境と実際の環境の違いに対する完全な解決策ではありません。
提示された5つの操作タスク以外の他のタスクの一般化性能は追加の検証が必要です。
👍