Sign In

Articulated Object Manipulation using Online Axis Estimation with SAM2-Based Tracking

Created by
  • Haebom
Category
Empty

저자

Xi Wang, Tianxing Chen, Qiaojun Yu, Tianling Xu, Zanxin Chen, Yiting Fu, Ziqi He, Cewu Lu, Yao Mu, Ping Luo

개요

본 논문은 관절형 물체 조작에서 정확한 축 고려의 중요성을 강조하며, 기존의 오픈루프 방식의 상호작용적 지각 기반 접근법의 한계를 극복하기 위해 폐쇄루프 파이프라인을 제시합니다. 이 파이프라인은 상호작용적 지각과 분할된 3D 점 구름을 이용한 온라인 축 추정을 통합합니다. SAM2(Segment Anything Model 2)를 사용하여 점 구름을 분할하고, 움직이는 부분을 마스크하여 정확한 동작 온라인 축 추정을 수행하며, 이를 통해 후속 로봇 동작을 안내합니다. 시뮬레이션 환경에서의 실험을 통해 제시된 방법이 기존 방법보다 우수한 성능을 보임을 입증합니다.

시사점, 한계점

시사점:
관절형 물체 조작의 정확도와 효율성을 향상시키는 새로운 폐쇄루프 파이프라인 제시.
상호작용적 지각과 온라인 축 추정을 통합하여 동적 상황에 대한 적응력 강화.
SAM2를 활용한 효율적인 점 구름 분할 및 움직이는 부분 마스킹.
축 기반 제어를 요구하는 작업에서 우수한 성능 입증.
한계점:
현재 시뮬레이션 환경에서만 실험 진행. 실제 로봇 시스템으로의 확장 및 검증 필요.
SAM2의 성능에 의존적이며, SAM2의 한계가 본 방법의 성능에 영향을 미칠 수 있음.
다양한 관절형 물체 및 조작 환경에 대한 일반화 성능 검증 필요.
👍