AgentDropout: Dynamic Agent Elimination for Token-Efficient and High-Performance LLM-Based Multi-Agent Collaboration
Created by
Haebom
Category
Empty
저자
Zhexuan Wang, Yutong Wang, Xuebo Liu, Liang Ding, Miao Zhang, Jie Liu, Min Zhang
개요
대규모 언어 모델(LLM) 기반의 다중 에이전트 시스템(MAS)은 협업적 문제 해결에 상당한 잠재력을 보여주지만, 낮은 의사소통 효율성과 최적이 아닌 작업 성능이라는 과제에 직면하고 있습니다. 따라서 에이전트의 의사소통 토폴로지 설계가 매우 중요합니다. 본 논문에서는 효율적인 팀의 역할이 종종 동적으로 조정된다는 관리 이론에서 영감을 얻어, AgentDropout을 제안합니다. AgentDropout은 의사소통 그래프의 인접 행렬을 최적화하여 중복된 에이전트와 서로 다른 의사소통 라운드 간의 의사소통을 식별하고 제거하여 토큰 효율성과 작업 성능을 모두 향상시킵니다. 최첨단 방법과 비교하여 AgentDropout은 프롬프트 토큰 소비량을 평균 21.6%, 완료 토큰 소비량을 18.4% 줄이고 작업 성능을 1.14 향상시킵니다. 또한 확장된 실험을 통해 AgentDropout이 주목할 만한 도메인 전이성과 구조적 강건성을 달성하여 신뢰성과 효과성을 보여줍니다. 코드는 https://github.com/wangzx1219/AgentDropout 에서 공개합니다.