Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Learning Hierarchical Domain Models Through Environment-Grounded Interaction

Created by
  • Haebom

저자

Claudius Kienle, Benjamin Alt, Oleg Arenz, Jan Peters

개요

LODGE는 자율 에이전트가 해석 가능한 계획을 생성하여 장기적인 작업을 해결할 수 있도록 돕는 도메인 모델을 연구한다. 개방형 환경에서 단일 일반 도메인 모델로는 다양한 작업을 처리할 수 없으므로, 에이전트는 즉시 작업별 모델을 생성해야 한다. LLM은 이러한 도메인을 생성할 수 있지만, 높은 오류율로 인해 적용에 제약이 있다. LODGE는 LLM 및 환경 기반 자율 도메인 학습을 위한 프레임워크로, 계층적 추상화와 자동 시뮬레이션을 활용하여 추상화 계층 간 및 모델과 환경 간의 불일치를 식별하고 수정한다. LODGE는 작업에 구애받지 않고, 시뮬레이터와 일반 실행 가능한 하위 수준 기술 집합에 대한 접근만을 가정하여 술어, 연산자, 사전 조건 및 효과를 생성한다. 실험 결과, LODGE는 기존 방법보다 정확한 도메인 모델과 높은 작업 성공률을 보였으며, 적은 환경 상호 작용과 인간 피드백 또는 시연이 필요하지 않았다.

시사점, 한계점

시사점:
자율적인 개방형 환경 배포를 위한 인간 피드백이나 사전 지식 없이 LLM과 환경을 활용한 자율 도메인 학습 프레임워크 제시.
계층적 추상화와 자동 시뮬레이션을 통해 모델과 환경 간의 불일치를 효과적으로 식별하고 수정.
작업에 구애받지 않는 방식으로 일반화된 술어, 연산자 등을 생성하여 다양한 도메인에 적용 가능.
실험을 통해 기존 방법 대비 향상된 정확도와 작업 성공률 입증.
한계점:
명시적인 한계점은 논문에 직접적으로 언급되지 않음.
LLM의 생성 능력에 의존하므로 LLM 자체의 오류 가능성을 완전히 배제할 수 없음.
시뮬레이터와 저수준 기술 집합에 대한 접근이 필요하며, 이러한 요소에 대한 의존성이 있을 수 있음.
제시된 실험 도메인 외의 다른 복잡한 환경에서의 성능은 추가 검증이 필요함.
👍