Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

A Survey on the Safety and Security Threats of Computer-Using Agents: JARVIS or Ultron?

Created by
  • Haebom

저자

Ada Chen, Yongjiang Wu, Junyuan Zhang, Shu Yang, Jen-tse Huang, Kun Wang, Wenxuan Wang, Shuai Wang

개요

본 논문은 컴퓨터 사용 에이전트(CUA)의 안전 및 보안 위협에 대한 지식 체계화를 제시한다. LLM 기반의 정교한 시스템으로 발전한 CUA는 데스크톱 애플리케이션, 웹 페이지, 모바일 앱 등을 자율적으로 조작할 수 있지만, LLM 추론의 취약성과 다양한 소프트웨어 구성 요소 및 다중 모달 입력의 통합으로 인한 복잡성으로 인해 새로운 안전 및 보안 위험을 야기한다. 본 논문은 문헌 검토를 통해 CUA에 적합한 정의, 현재의 안전 위협 분류, 방어 전략의 포괄적인 분류, CUA의 안전성 및 성능 평가에 사용되는 벤치마크, 데이터 세트 및 평가 지표를 제시하여 향후 연구 및 안전한 CUA 설계 및 배포를 위한 실질적인 지침을 제공한다.

시사점, 한계점

시사점:
CUA의 안전 및 보안 위협에 대한 체계적인 이해를 제공한다.
CUA의 안전 위협을 체계적으로 분류하고, 방어 전략을 제시한다.
CUA의 안전성 및 성능 평가를 위한 벤치마크, 데이터셋, 평가 지표를 요약하여 제시한다.
향후 연구를 위한 구조적인 기반과 실무자를 위한 실질적인 지침을 제공한다.
한계점:
본 논문에서 제시된 분류 및 벤치마크가 미래의 새로운 위협과 기술 발전에 얼마나 잘 적응할 수 있을지에 대한 검토가 필요하다.
특정 CUA 시스템에 대한 구체적인 사례 연구보다는 문헌 검토에 기반한 일반적인 분석에 집중되어 있다.
제시된 방어 전략의 효과성에 대한 실증적인 평가가 부족하다.
👍