Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

CRCE: Coreference-Retention Concept Erasure in Text-to-Image Diffusion Models

Created by
  • Haebom

저자

Yuyang Xue, Edward Moroshko, Feng Chen, Jingyu Sun, Steven McDonagh, Sotirios A. Tsaftaris

개요

텍스트-이미지 확산 모델은 원치 않는 콘텐츠를 생성할 수 있으며, 이를 제거하는 것이 필요합니다. 기존 방법들은 목표 개념의 잔여 흔적을 남기는 과소 제거 또는 관련 없지만 시각적으로 유사한 개념을 잘못 제거하는 과다 제거 문제를 겪습니다. 본 논문에서는 대규모 언어 모델을 활용하여 목표와 함께 제거해야 할 의미적으로 관련된 개념과 보존해야 할 개념을 구분하는 새로운 개념 제거 프레임워크인 CRCE를 제시합니다. CRCE는 공참조 및 유지 개념을 명시적으로 모델링함으로써 의도하지 않은 제거 없이 더욱 정확한 개념 제거를 가능하게 합니다. 실험 결과, CRCE는 실제 객체, 인물 신원 및 추상적인 지적 재산권 특징을 포함한 다양한 제거 작업에서 기존 방법보다 우수한 성능을 보여줍니다. 구축된 데이터셋 CorefConcept과 소스 코드는 수락 후 공개될 예정입니다.

시사점, 한계점

시사점:
대규모 언어 모델을 활용하여 개념 제거의 정확도를 향상시킨 새로운 프레임워크 CRCE 제시.
과소 제거 및 과다 제거 문제를 효과적으로 해결.
실제 객체, 인물 신원, 추상적 지적 재산권 특징 등 다양한 개념 제거 작업에 적용 가능성 증명.
새로운 데이터셋 CorefConcept 공개 예정.
한계점:
CorefConcept 데이터셋과 소스 코드는 논문 수락 후에 공개될 예정이므로, 현재로서는 실제 성능 검증이 어려움.
대규모 언어 모델의 성능에 의존적일 수 있음. 모델의 한계가 CRCE의 성능에 영향을 미칠 수 있음.
특정 유형의 개념 제거에 대해서는 추가적인 연구가 필요할 수 있음.
👍