Mentor3AD: Feature Reconstruction-based 3D Anomaly Detection via Multi-modality Mentor Learning
Created by
Haebom
저자
Jinbao Wang, Hanzhe Liang, Can Gao, Chenxi Hu, Jie Zhou, Yunkang Cao, Linlin Shen, Weiming Shen
개요
본 논문은 3D 이상치 탐지를 위한 다중 모달 특징 재구성 방법을 제안합니다. 특히, 다중 모달 멘토 학습을 활용하여 RGB와 3D 모달리티의 중간 특징을 융합하여 정상과 이상치 특징의 차이를 더욱 명확히 구분하는 Mentor3AD (Mentor 3D Anomaly Detection) 기법을 제시합니다. Mentor3AD는 융합 모듈(MFM)을 통해 RGB와 3D 모달리티에서 추출된 특징을 결합하여 멘토 특징을 생성하고, 이를 활용하여 지도 모듈(MGM)이 교차 모달 재구성을 향상시킵니다. 최종적으로 투표 모듈(VM)을 통해 이상치 점수를 생성합니다. MVTec 3D-AD와 Eyecandies 데이터셋을 이용한 실험 결과를 통해 제안된 방법의 효과를 검증하였습니다.