Sign In

LLM-Advisor: An LLM Benchmark for Cost-efficient Path Planning across Multiple Terrains

Created by
  • Haebom
Category
Empty

저자

Ling Xiao, Toshihiko Yamasaki

개요

본 논문은 다양한 지형에서 비용 효율적인 경로 계획을 위한 새로운 접근 방식인 LLM-Advisor를 제시합니다. LLM(대규모 언어 모델)을 어드바이저로 활용하여 기존 경로 계획 알고리즘(A*, RRT*, LLM-A*)의 경로를 개선합니다. LLM-Advisor는 필요한 경우에만 경로 수정을 제안하며, 실험 결과 A*, RRT*, LLM-A* 알고리즘에서 각각 70.59%, 69.47%, 78.70%의 경로에서 비용 효율성을 향상시키는 것을 확인했습니다. LLM의 환각(hallucination) 문제를 해결하기 위한 두 가지 전략도 제안하며, LLM을 경로 계획 루프에 직접 통합하는 것보다 어드바이저로 활용하는 것이 더 효과적임을 실험적으로 증명합니다. GPT-4o의 제로샷 경로 계획 성능이 저조함을 보여주며, LLM의 공간적 인식 능력의 한계를 지적합니다.

시사점, 한계점

시사점:
LLM을 경로 계획 어드바이저로 활용하여 기존 알고리즘의 비용 효율성을 향상시킬 수 있음을 보여줌.
LLM의 환각 문제를 완화하기 위한 효과적인 전략 제시.
LLM을 어드바이저로 활용하는 것이 경로 계획 루프에 직접 통합하는 것보다 효과적임을 실험적으로 증명.
한계점:
LLM이 여전히 환각(hallucination) 문제를 일으킬 수 있음.
GPT-4o의 실험 결과에서 확인된 바와 같이, LLM의 공간적 인식 능력이 제한적일 수 있음.
다양한 지형에서의 일반화 성능에 대한 추가적인 연구가 필요.
👍