V-VLAPS: Value-Guided Planning for Vision-Language-Action Models

작성자

Haebom

카테고리

Empty

저자

Ke Ren, Ali Salamatian, Kieran Pattison, Cyrus Neary

💡 개요

본 연구는 기존 시각-언어-행동(VLA) 모델의 반응적인 행동 방식이 분포 변화나 장기 과제 구조에서 실패할 수 있다는 문제를 제기합니다. 이를 해결하기 위해, VLA 모델의 사전 학습된 정책을 활용한 트리 탐색에 가치 함수 예측을 추가한 V-VLAPS 방법론을 제안합니다. V-VLAPS는 오프라인 VLA 롤아웃을 통해 몬테카를로 수익을 예측하는 가치 헤드를 학습시켜, 시뮬레이션에서 가치가 높은 탐색 경로를 우선적으로 고려하도록 합니다.

🔑 시사점 및 한계

•

VLA 모델의 표현력은 단순히 실패 예측을 넘어 가치 기반 계획을 지원할 수 있음을 시사합니다.

•

제안된 V-VLAPS는 탐색 예산이 충분할 경우, 기존 가치 없는 계획 방법 대비 성능 향상을 보였습니다.

•

가치 함수 예측의 분별력이 낮은 경우, 특히 탐색의 초기 단계에서 성능 향상이 제한적일 수 있다는 한계가 있습니다.

PDF 보기

Made with Slashpage