Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

LLM Collaboration With Multi-Agent Reinforcement Learning

Created by
  • Haebom
Category
Empty

저자

Shuo Liu, Tianle Chen, Zeyu Liang, Xueguang Lyu, Christopher Amato

개요

본 논문은 여러 상호작용하는 에이전트 문제를 모델링하고 해결하기 위한 다중 에이전트 시스템(MAS) 분야의 연구를 기반으로 한다. 기존의 독립적으로 사전 훈련된 LLM의 한계와 각 에이전트의 협력을 장려하기 위한 복잡한 보상 설계의 필요성을 해결하기 위해, LLM 협업을 협력적 MARL 문제로 모델링한다. Multi-Agent Group Relative Policy Optimization (MAGRPO) 알고리즘을 개발하여 LLM 쓰기 및 코딩 협업에 대한 실험을 수행하고, 효과적인 협력을 통해 고품질의 응답을 효율적으로 생성할 수 있음을 입증한다.

시사점, 한계점

MAGRPO 알고리즘을 활용한 LLM 기반 MAS의 협업 성능 향상
협력적 MARL 문제로 LLM 협업 모델링의 새로운 접근 방식 제시
LLM 쓰기 및 코딩 협업 분야에서의 성능 검증
다른 MARL 방법론을 LLM에 적용할 가능성 제시
MARL 기법을 LLM에 적용하는 데 따른 문제점 강조
GitHub를 통한 코드 공개
👍