Fly0: Decoupling Semantic Grounding from Geometric Planning for Zero-Shot Aerial Navigation

작성자

Haebom

카테고리

Empty

저자

Zhenxing Xu, Brikit Lu, Weidong Bao, Zhengqiu Zhu, Junsong Zhang, Hui Yan, Wenhao Lu, Ji Wang

💡 개요

본 연구는 기존 시각-언어 내비게이션(VLN) 시스템이 의미론적 이해와 기하학적 제어 정밀도 사이의 성능 저하를 겪는 문제를 해결하기 위해 Fly0 프레임워크를 제안합니다. Fly0는 대규모 멀티모달 언어 모델(MLLM)을 활용하여 자연어 지시를 2D 픽셀 좌표로 연결하고, 깊이 데이터를 이용해 3D 공간에서 목표물을 파악하며, 충돌 없는 3D 궤적을 생성하는 방식으로 의미론적 추론과 기하학적 계획을 분리합니다. 이를 통해 시각적 접촉이 끊긴 상황에서도 안정적인 내비게이션이 가능해지며, 계산 복잡성을 줄이고 시스템 안정성을 높입니다.

🔑 시사점 및 한계

•

MLLM의 뛰어난 의미론적 이해 능력을 활용하되, 저수준 제어에서의 성능 저하를 분리하여 극복할 수 있음을 보여줍니다.

•

시각적 정보가 단절된 상황에서도 안정적인 내비게이션을 가능하게 하는 새로운 접근 방식을 제시합니다.

•

불확실성이 높은 비정형 환경에서 기존 최첨단 방식 대비 성공률을 20% 이상 높이고 내비게이션 오차를 50% 가까이 줄이는 뛰어난 성능을 입증했습니다.

•

복잡한 실시간 동적 환경에서의 MLLM의 실시간 추론 지연 및 안정성 문제를 해결하는 데 기여합니다.

PDF 보기

Made with Slashpage