Sign In

LookSync: Large-Scale Visual Product Search System for AI-Generated Fashion Looks

Created by
  • Haebom
Category
Empty

저자

Pradeep M, Ritesh Pallod, Satyen Abrol, Muthu Raman, Ian Anderson

개요

생성형 AI가 가상 룩과 아바타를 통해 패션 분야를 변화시키면서, AI가 생성한 스타일과 가장 잘 맞는 실제 제품을 찾는 것이 중요해졌습니다. 본 논문은 AI 생성 룩에 가장 시각적, 의미적으로 유사한 제품을 매칭하는 실제 인터넷 규모의 엔드투엔드 제품 검색 시스템을 제안합니다. 이 시스템은 쿼리 생성, 벡터화, 후보 검색, AI 생성 룩 기반 재랭킹의 네 가지 주요 구성 요소로 이루어져 있습니다. 시스템은 하루 35만 개 이상의 AI 룩을 처리하며, 1,200만 개 이상의 제품과 다양한 제품 카테고리를 지원합니다. CLIP 모델이 다른 모델보다 인간 평가 정확도에서 3~7% 더 나은 성능을 보였고, 사용자의 인식 일치도를 향상시켜 프로덕션 환경에서 가장 신뢰할 수 있는 모델로 자리 잡았습니다.

시사점, 한계점

시사점:
AI 생성 룩에 최적화된 제품 검색 시스템 구축 및 실제 배포 성공
CLIP 모델을 기반으로 한 검색 시스템의 성능 검증 및 프로덕션 환경에서의 우수성 입증
대규모 제품 데이터 및 다양한 시장에 대한 시스템 적용 가능성 제시
사용자 경험 향상에 기여
한계점:
CLIP 모델의 성능 향상이 절대적으로 크지 않음 (상대적 3-7% 개선)
성능 평가가 인간 평가 정확도에만 의존
구체적인 쿼리 생성, 벡터화, 후보 검색, 재랭킹 방법론에 대한 상세 내용 부족
👍