Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Symmetrical Flow Matching: Unified Image Generation, Segmentation, and Classification with Score-Based Generative Models

Created by
  • Haebom
Category
Empty

저자

Francisco Caetano, Christiaan Viviers, Peter H. N. De With, Fons van der Sommen

개요

Symmetrical Flow Matching (SymmFlow)는 분포 간의 연속적인 변환을 학습하는 강력한 프레임워크인 Flow Matching을 기반으로 하며, 의미론적 분할, 분류 및 이미지 생성을 단일 모델로 통합하는 새로운 방식을 제시합니다. 양방향 일관성을 보장하고 생성적 다양성을 위해 충분한 엔트로피를 유지하면서, 대칭 학습 목표를 사용하여 정방향 및 역방향 변환을 공동으로 모델링합니다. SymmFlow는 의미론적 구조를 보존하면서 효율적인 샘플링을 특징으로 하는 새로운 훈련 목표를 도입하여 흐름 전반에 걸쳐 의미론적 정보를 명시적으로 유지하여 반복적인 개선 없이 한 단계 분할 및 분류를 가능하게 합니다. 픽셀 수준 및 이미지 수준 클래스 레이블을 모두 지원하는 유연한 조건을 지원하며, 다양한 벤치마크에서 SOTA 성능을 달성했습니다.

시사점, 한계점

단일 모델 내에서 의미론적 분할, 분류, 이미지 생성을 통합.
양방향 일관성 및 생성적 다양성 보장.
한 단계 분할 및 분류 가능.
유연한 조건 지원.
CelebAMask-HQ 및 COCO-Stuff에서 SOTA 성능 달성.
추론 단계가 25단계로 효율적.
구체적인 한계점은 논문 원문을 참조해야 함. (논문에서는 한계점에 대한 직접적인 언급은 없음)
👍