Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Is Contrasting All You Need? Contrastive Learning for the Detection and Attribution of AI-generated Text

Created by
  • Haebom
Category
Empty

저자

Lucio La Cava, Davide Costa, Andrea Tagarelli

개요

본 논문은 대규모 언어 모델의 발전으로 인해 인간과 AI가 생성한 텍스트 간의 구분이 모호해지는 문제를 해결하기 위해, AI 생성 텍스트의 탐지 및 기원 추적을 위한 새로운 프레임워크인 WhosAI를 제안합니다. WhosAI는 여러 생성 모델로부터 의미적 유사성 표현을 동시에 학습하는 triplet-network contrastive learning 기반의 프레임워크로, 텍스트가 인간 또는 AI에 의해 생성되었는지 예측하고 저작자를 밝히는 두 가지 과제를 동등하게 처리합니다. 기존 방법과 달리, 새로운 AI 텍스트 생성 모델이 출시되더라도 해당 모델의 생성 인스턴스를 WhosAI의 임베딩 공간에 통합하여 확장성을 유지하며 모델 종속성이 없습니다. 20만 개의 뉴스 기사로 구성된 TuringBench 벤치마크 실험 결과, WhosAI는 Turing Test와 저작자 추정 과제 모두에서 기존 최고 성능을 뛰어넘는 결과를 보였습니다.

시사점, 한계점

시사점:
AI 생성 텍스트 탐지 및 기원 추적 분야에서 새로운 state-of-the-art 성능 달성.
다양한 AI 모델의 텍스트를 동시에 처리하는 모델-애그노스틱(model-agnostic) 접근 방식 제시.
새로운 AI 모델 출시에 대한 확장성을 확보.
TuringBench 벤치마크를 활용한 객관적인 성능 평가.
한계점:
TuringBench 벤치마크에 대한 의존성. 다른 벤치마크 데이터셋에서의 성능 검증 필요.
실제 세계의 다양한 텍스트 유형에 대한 일반화 성능 평가 필요.
WhosAI의 학습 과정 및 계산 비용에 대한 자세한 분석 부족.
프레임워크의 robustness 및 adversarial examples에 대한 취약성 분석 부재.
👍