Semantic Discrepancy-aware Detector for Image Forgery Identification
Created by
Haebom
저자
Ziye Wang, Minghang Yu, Chunyan Xu, Zhen Cui
개요
본 논문은 이미지 생성 기술의 발전으로 인해 이미지 위변조 탐지의 중요성이 증대됨에 따라, 사전 훈련된 모델의 의미론적 개념을 활용한 위변조 탐지 연구에 초점을 맞추고 있습니다. 위변조 이미지와 의미론적 개념 공간 간의 불일치 문제를 해결하기 위해, 세 가지 주요 모듈로 구성된 새로운 의미론적 불일치 인식 검출기(SDD)를 제안합니다. 첫째, 의미 토큰 샘플링 모듈은 위변조 흔적 및 의미론적 개념과 무관한 특징으로 인한 공간 이동을 완화합니다. 둘째, 개념 수준 위변조 불일치 학습 모듈은 시각적 재구성 패러다임을 기반으로 시각적 의미론적 개념과 위변조 흔적 간의 상호 작용을 강화하여 개념의 안내에 따라 불일치를 효과적으로 포착합니다. 셋째, 저수준 위변조 특징 강화기는 학습된 개념 수준 위변조 불일치를 통합하여 중복된 위변조 정보를 최소화합니다. 두 개의 표준 이미지 위변조 데이터셋에 대한 실험 결과, 제안된 SDD가 기존 방법보다 우수한 결과를 달성함을 보여줍니다. 소스 코드는 https://github.com/wzy1111111/SSD 에서 이용 가능합니다.