Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

DuFFin: A Dual-Level Fingerprinting Framework for LLMs IP Protection

Created by
  • Haebom

저자

Yuliang Yan, Haochun Tang, Shuo Yan, Enyan Dai

개요

본 논문은 대규모 언어 모델(LLM)의 지적 재산권(IP) 보호를 위한 새로운 프레임워크인 DuFFin을 제안합니다. 기존의 워터마킹 및 지문 기법들이 LLM의 텍스트 생성 과정에 영향을 미치거나 의심 모델에 대한 화이트박스 접근에 제한적이라는 한계를 극복하고자, 블랙박스 환경에서 작동하는 이중 수준 지문 프레임워크를 제시합니다. DuFFin은 트리거 패턴과 지식 수준 지문을 추출하여 의심 모델의 출처를 식별합니다. 다양한 오픈소스 모델(기본 모델 및 파인튜닝, 양자화, 안전 정렬 버전 포함)을 사용한 실험 결과, DuFFin은 기본 LLM의 저작권을 정확하게 검증하며 IP-ROC 지표 0.95 이상을 달성했습니다. 소스 코드는 공개되어 있습니다.

시사점, 한계점

시사점:
블랙박스 환경에서 LLM의 지적 재산권 보호를 위한 효과적인 방법 제시
다양한 모델 변형(파인튜닝, 양자화, 안전 정렬 등)에 대해서도 정확한 저작권 검증 가능성을 보여줌
높은 IP-ROC 지표(0.95 이상) 달성
오픈소스 코드 공개를 통한 접근성 향상
한계점:
본 논문에서 제시된 실험의 범위가 오픈소스 모델에 국한됨. 폐쇄적인 상업용 모델에 대한 적용 가능성은 추가 연구가 필요함.
다양한 공격 기법에 대한 저항성에 대한 추가적인 검증 필요.
IP-ROC 지표 외 다른 성능 지표를 통한 추가적인 평가 필요.
👍