AgentGit: A Version Control Framework for Reliable and Scalable LLM-Powered Multi-Agent Systems
Created by
- Haebom
Category
Empty
저자
Yang Li, Siqi Ping, Xiyu Chen, Xiaojian Qi, Zigan Wang, Ye Luo, Xiaowei Zhang
AgentGit: Git-like Version Control for LLM-powered Multi-Agent Systems
개요
본 논문은 대규모 언어 모델(LLM) 기반 다중 에이전트 시스템(MAS)의 신뢰성과 확장성 문제를 해결하기 위해, Git과 유사한 롤백 및 브랜칭 기능을 제공하는 AgentGit 프레임워크를 제시한다. LangGraph 기반으로 구축된 AgentGit은 상태 커밋, 되돌리기, 브랜칭을 지원하여 에이전트가 여러 궤적을 효율적으로 탐색, 비교, 탐험할 수 있도록 한다. AgentGit의 성능 평가를 위해, 더 나은 프롬프트를 선택하여 대상 에이전트를 최적화하는 실험을 수행하였다. 실제 작업(논문 초록 검색 및 분석)에 대한 A/B 테스트를 통해 LangGraph, AutoGen, Agno의 세 가지 기준선과 비교한 결과, AgentGit이 중복 계산을 현저히 줄이고, 런타임 및 토큰 사용량을 감소시키며, 여러 브랜치에서 병렬 탐색을 지원하여 MAS 개발의 신뢰성과 확장성을 향상시킴을 확인했다.
시사점, 한계점
•
AgentGit은 MAS 워크플로우에 Git과 유사한 버전 관리 기능을 도입하여 신뢰성을 높이고 확장성을 개선했다.
•
중복 계산 감소, 런타임 및 토큰 사용량 감소, 병렬 탐색 지원을 통해 MAS 개발 효율성을 향상시켰다.
•
에러 복구, 안전한 탐험, 반복적 디버깅, A/B 테스트를 가능하게 하여 협업 AI 시스템 설계에 기여한다.
•
본 논문은 AgentGit 프레임워크의 성능을 특정 작업(논문 초록 검색 및 분석)에 대해서만 평가했다.
•
AgentGit의 적용 가능한 MAS task의 종류와 규모에 대한 추가 연구가 필요하다.
•
다른 MAS 프레임워크와의 호환성 및 통합에 대한 연구가 필요하다.
