TMUAD: Enhancing Logical Capabilities in Unified Anomaly Detection Models with a Text Memory Bank
Created by
Haebom
저자
Jiawei Liu, Jiahe Hou, Wei Wang, Jinsong Du, Yang Cong, Huijie Fan
개요
본 논문은 정상 데이터의 부족으로 어려움을 겪는 이상치 탐지 문제에 대해, 기존의 통합 방식과 달리 텍스트 메모리 뱅크를 도입하여 논리적 이상치 탐지를 향상시키는 Three-Memory framework for Unified structural and logical Anomaly Detection (TMUAD)를 제안합니다. TMUAD는 제안된 논리 인식 텍스트 추출기를 사용하여 클래스 수준의 텍스트 메모리 뱅크를 구축하여 이미지에서 객체의 풍부한 논리적 설명을 포착하고, 분할된 객체에서 특징을 추출하여 객체 수준의 이미지 메모리 뱅크를 구축하며, 패치 수준의 이미지 특징을 추출하여 패치 수준의 메모리 뱅크를 구축합니다. 이 세 가지 상호 보완적인 메모리 뱅크를 사용하여 쿼리 이미지와 가장 유사한 정상 이미지를 검색하고 비교하여 여러 수준에서 이상치 점수를 계산하고 최종 이상치 점수로 융합합니다. 이를 통해 구조적 및 논리적 이상치 탐지를 통합하여 산업 및 의료 분야의 7개 공개 데이터셋에서 최첨단 성능을 달성합니다. 모델과 코드는 https://github.com/SIA-IDE/TMUAD 에서 이용 가능합니다.