Sign In

When Agents Disagree: The Selection Bottleneck in Multi-Agent LLM Pipelines

Author
  • Haebom
Category
Empty

저자

Artem Maryanskyy, Dmitry Budnikov, Alibek T. Kaliyev

💡 개요

본 논문은 다중 에이전트 LLM 파이프라인에서 에이전트 다양성과 출력 품질 간의 상반된 결과를 해결하기 위해 '선택 병목 현상'이라는 개념을 제안합니다. 이는 다양성이 도움이 되는지 해가 되는지를 결정하는 집계 품질의 교차 임계값을 식별하며, 이를 통해 다양성이 유익한 영역과 해로운 영역을 구분하는 닫힌 형태의 임계값을 도출했습니다. 실험 결과, 다양성을 활용한 팀이 단일 모델 기반보다 월등히 우수한 성능을 보였으며, 에이전트 선택기의 품질이 생성 에이전트의 다양성보다 더 중요한 설계 요소임을 시사합니다.

🔑 시사점 및 한계

다중 에이전트 LLM 파이프라인에서 에이전트 다양성이 항상 출력 품질 향상으로 이어지는 것은 아니며, 집계 방식에 따라 결과가 달라질 수 있습니다.
'선택 병목 현상'이라는 새로운 개념을 통해 다양성의 효과를 예측하고 최적화할 수 있는 이론적 프레임워크를 제시합니다.
에이전트 선택기의 품질이 생성 에이전트의 다양성보다 더 결정적인 역할을 할 수 있음을 실험적으로 입증했습니다.
제안된 모델은 단일 라운드 생성-선택 파이프라인에 초점을 맞추고 있으며, 보다 복잡한 다중 라운드 또는 반복적인 파이프라인에는 직접 적용되지 않을 수 있습니다.
👍