Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Rethinking Agent Design: From Top-Down Workflows to Bottom-Up Skill Evolution

Created by
  • Haebom

저자

Jiawei Du, Jinlong Wu, Yuzheng Chen, Yucheng Hu, Bing Li, Joey Tianyi Zhou

개요

본 논문은 기존의 상향식(top-down) LLM 기반 에이전트 프레임워크의 한계를 극복하고자, 인간의 학습 과정을 모방한 하향식(bottom-up) 에이전트 패러다임을 제시합니다. 상향식 접근 방식은 에이전트가 시행착오(trial-and-reasoning) 메커니즘을 통해 경험으로부터 학습하고, 숙련된 기술을 획득하여 공유하고 확장하는 것을 특징으로 합니다. 이를 통해 정적 복제가 아닌 지속적인 진화가 가능하며, 다수의 에이전트가 배치될수록 다양한 경험을 통해 집단적 학습이 가속화되어, 특히 개방형 환경에 적합합니다. Slay the Spire와 Civilization V 게임에서 raw visual inputs를 통해 환경을 인지하고 마우스 출력을 통해 행동하는 에이전트를 통해 이 패러다임을 평가하였으며, 게임 특정 프롬프트나 API 없이 자율적인 상호작용을 통해 기술을 습득하는 것을 보여줍니다.

시사점, 한계점

시사점:
기존 상향식 LLM 에이전트의 한계를 극복하는 새로운 하향식 패러다임 제시
에이전트의 경험 기반 학습 및 지속적인 진화 가능성을 보여줌
복잡한 실제 환경에서의 적용 가능성을 게임 실험으로 검증
게임 특정 지식 없이 raw visual input과 mouse output 만으로 학습 가능
다수 에이전트의 집단적 학습을 통한 효율 증대 가능성 제시
공개된 코드를 통해 재현성 확보
한계점:
제시된 하향식 패러다임의 일반화 가능성에 대한 추가 연구 필요
다양한 환경 및 작업에 대한 적용 가능성 검증 필요
학습 속도 및 효율성에 대한 더 자세한 분석 필요
현재 실험 환경의 제한으로 인한 일반화의 어려움
복잡한 의사결정 과정에 대한 설명 부족
👍