Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Polymath: A Self-Optimizing Agent with Dynamic Hierarchical Workflow

Created by
  • Haebom

저자

Chia-Tung Ho, Jing Gong, Xufeng Yao, Yunsheng Bai, Abhishek B Akkur, Haoxing Ren

개요

본 논문은 대규모 언어 모델(LLM)을 기반으로 하는 에이전트 시스템의 효율성 및 확장성 문제를 해결하기 위해, 자체 최적화 기능을 갖춘 다층적 워크플로우를 가진 에이전트인 Polymath를 제안한다. Polymath는 작업 흐름 그래프의 유연성과 코드 기반 워크플로우의 표현력을 활용하여 다양한 실제 문제를 해결한다. 특히, 다중 그리드 기반 그래프 최적화와 자기 반성 기반 진화 알고리즘을 통합하여 레이블이 없는 데이터로도 워크플로우를 개선한다. 코딩, 수학, 다회차 질의응답 등 6가지 벤치마크 데이터셋에서 기존 최고 성능 모델 대비 평균 8.1% 향상된 성능을 보였다.

시사점, 한계점

시사점:
레이블 없는 데이터를 사용하여 LLM 기반 에이전트의 워크플로우를 효율적으로 최적화하는 새로운 방법 제시.
작업 흐름 그래프와 코드 기반 워크플로우를 활용하여 다양하고 동적인 실제 문제 해결 가능성을 보여줌.
다중 그리드 기반 그래프 최적화와 자기 반성 기반 진화 알고리즘의 효과적인 통합.
다양한 벤치마크 데이터셋에서 기존 방법 대비 성능 향상을 실험적으로 검증.
한계점:
제안된 방법의 일반화 성능 및 다양한 문제 유형에 대한 적용 가능성에 대한 추가적인 연구 필요.
6개의 벤치마크 데이터셋은 다양한 문제 유형을 완벽하게 포괄하지 못할 수 있음. 더욱 광범위한 실험이 필요.
자기 반성 기반 진화 알고리즘의 계산 비용 및 최적화 과정의 복잡성에 대한 분석 필요.
👍