Sign In

dARt Vinci: Egocentric Data Collection for Surgical Robot Learning at Scale

Created by
  • Haebom
Category
Empty

저자

Yihao Liu, Yu-Chun Ku, Jiaming Zhang, Hao Ding, Peter Kazanzides, Mehran Armand

개요

데이터 부족은 로봇 학습 분야의 오랜 문제입니다. 특히 수술과 같은 안전이 중요한 영역에서는 고품질 데이터를 얻기가 매우 어렵습니다. 이는 일반화 능력을 크게 향상시키고 로봇이 자율적으로 작업을 수행할 수 있도록 한 강화 학습 및 모방 학습의 최근 발전을 활용하려는 연구자들에게 어려움을 안겨줍니다. 본 논문에서는 수술 환경에서 로봇 학습을 위한 확장 가능한 데이터 수집 플랫폼인 dARt Vinci를 소개합니다. 이 시스템은 증강 현실(AR) 손 추적 및 고충실도 물리 엔진을 사용하여 기본적인 수술 작업에서 미묘한 동작을 포착합니다. 물리적 로봇 설정이 필요 없고 시간, 공간 및 다중 뷰 센서 및 액추에이터와 같은 하드웨어 리소스 측면에서 유연성을 제공함으로써 전문화된 시뮬레이션이 실행 가능한 대안입니다. 동시에 AR은 본체 추적 및 콘텐츠 오버레이 기능을 통해 로봇 데이터 수집을 더욱 자기 중심적으로 만들 수 있습니다. 사용자 연구는 제안된 시스템의 효율성과 사용성을 확인했으며, 여기서 다빈치 수술 로봇을 사용한 원격 조작 교육을 위한 널리 사용되는 기본 작업을 사용했습니다. 실제 로봇 설정과 비교하여 모든 작업에 걸쳐 데이터 처리량이 평균 41% 향상되었습니다. 총 실험 시간은 평균 10% 단축되었습니다. 작업 부하 설문 조사의 시간적 요구 사항이 개선되었습니다. 이러한 이점은 통계적으로 유의미합니다. 또한 수집된 데이터의 크기는 400배 이상 작아 저장 공간이 훨씬 적게 필요하면서도 주파수는 두 배가 됩니다.

시사점, 한계점

시사점:
증강현실(AR) 기반 시뮬레이션을 활용하여 수술 로봇 학습을 위한 효율적이고 확장 가능한 데이터 수집 플랫폼을 제시.
실제 로봇 설정 대비 데이터 처리량 향상 (평균 41%), 실험 시간 단축 (평균 10%), 데이터 크기 감소 (400배 이상) 등의 성능 향상을 입증.
AR의 자기중심적인 데이터 수집 방식을 통해 더욱 정확하고 효과적인 데이터 획득 가능성 제시.
한계점:
시뮬레이션 환경과 실제 수술 환경 간의 차이로 인한 일반화 성능 저하 가능성.
AR 기반 시스템의 정확도 및 안정성에 대한 추가적인 검증 필요.
다양한 수술 유형 및 복잡도에 대한 적용 가능성 검토 필요.
다빈치 수술 로봇에 특화된 시스템으로, 다른 로봇 시스템으로의 확장성 검토 필요.
👍