Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

IP Leakage Attacks Targeting LLM-Based Multi-Agent Systems

Created by
  • Haebom

저자

Liwen Wang, Wenxuan Wang, Shuai Wang, Zongjie Li, Zhenlan Ji, Zongyi Lyu, Daoyuan Wu, Shing-Chi Cheung

개요

본 논문은 대규모 언어 모델(LLM) 기반 다중 에이전트 시스템(MAS)의 지적 재산(IP) 보호 취약성을 다룹니다. MASLEAK이라는 새로운 공격 프레임워크를 제시하며, 이는 MAS의 공개 API를 통해 시스템 아키텍처, 에이전트 구성, 시스템 프롬프트, 작업 지침, 도구 사용 등의 민감한 정보를 추출합니다. 컴퓨터 웜의 전파 방식에서 영감을 얻어 설계된 MASLEAK은 적대적 질의를 통해 각 에이전트의 응답을 유도하고 전파하여 정보를 획득합니다. 810개의 합성 MAS 애플리케이션 데이터셋과 Coze, CrewAI와 같은 실제 애플리케이션을 대상으로 평가한 결과, 시스템 프롬프트 및 작업 지침에 대해 평균 87%, 시스템 아키텍처에 대해 92%의 높은 정확도로 MAS IP를 추출하는 것을 확인했습니다.

시사점, 한계점

시사점:
LLM 기반 MAS의 IP 유출 위험성을 실증적으로 제시합니다.
MASLEAK이라는 효과적인 블랙박스 공격 프레임워크를 제시합니다.
실제 MAS 애플리케이션에 대한 공격 성공률을 정량적으로 제시합니다.
MAS의 보안 강화를 위한 연구 방향을 제시합니다.
한계점:
현재 제시된 방어 메커니즘은 논의 단계에 머물러 있으며, 실제적인 방어 기법에 대한 연구가 필요합니다.
MASLEAK의 효과는 특정 유형의 MAS에 국한될 수 있으며, 다양한 MAS 아키텍처에 대한 추가 연구가 필요합니다.
합성 데이터셋과 실제 데이터셋의 차이로 인해 일반화 가능성에 대한 추가 검증이 필요합니다.
👍