Magentic Marketplace: An Open-Source Environment for Studying Agentic Markets
Created by
- Haebom
Category
Empty
저자
Gagan Bansal, Wenyue Hua, Zezhou Huang, Adam Fourney, Amanda Swearngin, Will Epperson, Tyler Payne, Jake M. Hofman, Brendan Lucier, Chinmay Singh, Markus Mobius, Akshay Nambi, Archana Yadav, Kevin Gao, David M. Rothschild, Aleksandrs Slivkins, Daniel G. Goldstein, Hussein Mozannar, Nicole Immorlica, Maya Murad, Matthew Vogel, Subbarao Kambhampati, Eric Horvitz, Saleema Amershi
개요
LLM 에이전트가 경제적 의사 결정을 중재함에 따라 사용자에게 이점과 문제점을 동시에 야기한다. 현실적인 시장 환경에서 에이전트의 행동 방식을 이해하기 위해, 본 논문은 소비자를 대표하는 Assistant 에이전트와 경쟁 사업체를 대표하는 Service 에이전트가 상호 작용하는 양면 에이전트 마켓플레이스를 연구한다. Magentic-Marketplace라는 시뮬레이션 환경을 개발하여 에이전트의 유틸리티, 행동 편향, 조작 취약성, 검색 메커니즘이 시장 결과에 미치는 영향을 분석한다. 실험 결과, 최첨단 모델이 이상적인 검색 조건에서는 최적의 복지에 근접하지만, 규모가 커질수록 성능이 저하되고, 모든 모델이 심각한 첫 번째 제안 편향을 보여 응답 속도가 품질보다 10-30배 유리하다는 것을 확인했다.
시사점, 한계점
•
최첨단 모델은 이상적인 검색 환경에서 좋은 성과를 보이지만, 실제 시장 조건에서는 성능이 저하될 수 있다.
•
모든 모델은 첫 번째 제안 편향을 보이며, 이는 응답 속도가 품질보다 더 중요하게 작용함을 시사한다.
•
본 연구는 에이전트 마켓플레이스의 설계 및 구현에 필요한 통찰력을 제공한다.
•
연구는 시뮬레이션 환경에 국한되어 실제 시장의 복잡성을 완전히 반영하지 못할 수 있다.
•
모델의 행동 편향과 조작 취약성을 완화하기 위한 추가 연구가 필요하다.
