Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Explaining Decentralized Multi-Agent Reinforcement Learning Policies

Created by
  • Haebom
Category
Empty

저자

Kayla Boggess, Sarit Kraus, Lu Feng

개요

다중 에이전트 강화 학습(MARL)은 여러 에이전트가 다양한 도메인에서 순차적인 의사 결정을 수행할 수 있도록 하여 최근 많은 관심을 받고 있습니다. 그러나 대부분의 기존 설명 방법은 중앙 집중식 MARL에 초점을 맞추고 있으며, 분산 환경의 불확실성과 비결정론성을 해결하지 못합니다. 본 논문에서는 분산 MARL 정책에서 작업 순서와 에이전트 협업을 포착하는 정책 요약을 생성하는 방법과 특정 에이전트 행동에 대한 사용자 쿼리(언제, 왜 안 되는지, 무엇인지)에 대한 쿼리 기반 설명을 제안합니다. 우리는 4개의 MARL 도메인과 2개의 분산 MARL 알고리즘에서 접근 방식을 평가하여 일반화 가능성과 계산 효율성을 입증했습니다. 사용자 연구에 따르면, 우리의 요약 및 설명은 사용자 질문 답변 성능을 크게 향상시키고 이해도 및 만족도와 같은 지표에서 주관적인 평가를 향상시킵니다.

시사점, 한계점

분산 MARL 정책에서 작업 순서 및 에이전트 협업을 포착하는 정책 요약 생성
특정 에이전트 행동에 대한 쿼리 기반 설명 제공 (언제, 왜 안 되는지, 무엇인지)
4개의 MARL 도메인 및 2개의 분산 MARL 알고리즘에서 접근 방식의 일반화 가능성과 계산 효율성 입증
사용자 연구를 통해 요약 및 설명이 사용자 질문 답변 성능 및 주관적인 평가 향상
논문의 한계점에 대한 언급은 없음
👍