RoboWM-Bench: A Benchmark for Evaluating World Models in Robotic Manipulation

작성자

Haebom

카테고리

Empty

저자

Feng Jiang, Yang Chen, Kyle Xu, Yuchen Liu, Haifeng Wang, Zhenhao Shen, Jasper Lu, Shengze Huang, Yuanfei Wang, Chen Xie, Ruihai Wu

💡 개요

본 논문은 로봇 조작 분야에서 비디오 월드 모델의 성능을 평가하기 위한 새로운 벤치마크인 RoboWM-Bench를 제안합니다. RoboWM-Bench는 생성된 조작 비디오를 실행 가능한 로봇 행동 시퀀스로 변환하고 물리적으로 구현된 시뮬레이션 환경에서 검증합니다. 이를 통해 현재의 비디오 월드 모델들이 시각적 사실성만으로는 부족하며, 실제 로봇이 실행 가능한 물리적 일관성과 조작 과제 완수 능력을 체계적으로 평가할 수 있습니다.

🔑 시사점 및 한계

•

비디오 월드 모델의 시각적 사실성과 실제 로봇의 실행 가능성이 항상 일치하는 것은 아니며, 이를 평가하는 것이 중요합니다.

•

공간 추론, 접촉 예측, 비물리적 기하학적 왜곡 등이 복잡하고 긴 호라이즌 상호작용에서의 실행 성능에 영향을 미치는 주요 요인입니다.

•

RoboWM-Bench는 로봇 조작을 위한 물리적으로 구현된 월드 모델링을 발전시키는 데 있어 몸체 인식(embodiment-aware) 평가의 가치를 강조합니다.

•

향후 연구는 더 복잡한 조작 시나리오와 장기간의 상호작용에 대한 모델의 능력을 개선하는 데 초점을 맞춰야 합니다.

PDF 보기

Made with Slashpage