Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

The Finer the Better: Towards Granular-aware Open-set Domain Generalization

Created by
  • Haebom
Category
Empty

저자

Yunyun Wang, Zheng Duan, Xinyue Liao, Ke-Jia Chen, Songcan Chen

개요

본 논문은 오픈셋 도메인 일반화(OSDG) 문제를 해결하기 위해, CLIP과 같은 비전-언어 모델의 성능 향상을 목표로 하는 Semantic-enhanced CLIP (SeeCLIP) 프레임워크를 제안한다. 특히, 알려진 클래스와 미지의 클래스 사이의 구조적 위험과 열린 공간 위험 사이의 딜레마를 해결하고, "hard unknowns"에 대한 과신 문제를 해결하는 데 초점을 맞춘다. SeeCLIP은 세밀한 의미론적 향상을 통해 이미지 분해, 듀플렉스 대조 학습, 그리고 의미론적 지침 확산 모듈을 활용하여 성능을 개선한다. 실험 결과, 5개의 벤치마크에서 기존 최고 성능 모델 대비 정확도 3%, H-score 5% 향상을 보였다.

시사점, 한계점

시사점:
세밀한 의미론적 향상을 통해 비전-언어 모델의 OSDG 성능을 개선하는 새로운 프레임워크 제시.
"hard unknowns" 문제 해결을 위한 새로운 접근 방식 (의미론적 지침 확산 모듈).
듀플렉스 대조 학습을 통한 알려진 클래스와 미지의 클래스 간 분리 및 의미론적 근접성 유지.
다양한 벤치마크에서 기존 최고 성능 모델보다 향상된 성능 입증.
한계점:
구체적인 한계점은 논문 내용에서 명시되지 않음 (추가 분석 필요).
👍