Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

REI-Bench: Can Embodied Agents Understand Vague Human Instructions in Task Planning?

Created by
  • Haebom

저자

Chenxi Jiang, Chuhao Zhou, Jianfei Yang

개요

본 논문은 대규모 언어 모델(LLM) 기반 로봇 작업 계획에서 모호한 언어 표현(REs)이 미치는 영향을 연구하고, 이를 해결하기 위한 새로운 벤치마크와 접근법을 제시합니다. 실제 사용자의 지시는 종종 모호성을 포함하고 있으며, 특히 노인이나 어린이에게 더욱 두드러집니다. 논문은 모호한 REs를 포함하는 새로운 로봇 작업 계획 벤치마크(REI-Bench)를 제안하고, 이를 통해 모호성이 로봇 계획 성능을 최대 77.9%까지 저하시킬 수 있음을 보여줍니다. 성공률 저하의 주요 원인은 계획자의 객체 누락임을 확인하고, 이 문제를 해결하기 위해 작업 지향적 맥락 인지(task-oriented context cognition)라는 간단하면서도 효과적인 접근 방식을 제시합니다. 이 접근 방식은 로봇을 위한 명확한 지시를 생성하여 기존 방법보다 우수한 성능을 달성합니다.

시사점, 한계점

시사점:
모호한 언어 표현(REs)이 LLM 기반 로봇 작업 계획에 미치는 부정적 영향을 정량적으로 규명.
모호한 REs 문제를 해결하기 위한 새로운 벤치마크(REI-Bench) 제공.
작업 지향적 맥락 인지라는 효과적인 해결책 제시 및 성능 개선.
노인 및 어린이와 같은 비전문가 사용자를 위한 로봇 작업 계획의 실용성 증대에 기여.
한계점:
제시된 접근 방식(task-oriented context cognition)의 일반화 성능 및 다양한 작업에 대한 적용 가능성에 대한 추가 연구 필요.
REI-Bench의 범위와 다양성을 더욱 확장하여 실제 환경의 복잡성을 더 잘 반영할 필요가 있음.
모호성 해결을 위한 다른 접근 방식과의 비교 분석이 부족함.
👍