Daily Arxiv

μ „ μ„Έκ³„μ—μ„œ λ°œκ°„λ˜λŠ” 인곡지λŠ₯ κ΄€λ ¨ 논문을 μ •λ¦¬ν•˜λŠ” νŽ˜μ΄μ§€ μž…λ‹ˆλ‹€.
λ³Έ νŽ˜μ΄μ§€λŠ” Google Geminiλ₯Ό ν™œμš©ν•΄ μš”μ•½ μ •λ¦¬ν•˜λ©°, λΉ„μ˜λ¦¬λ‘œ 운영 λ©λ‹ˆλ‹€.
논문에 λŒ€ν•œ μ €μž‘κΆŒμ€ μ €μž 및 ν•΄λ‹Ή 기관에 있으며, 곡유 μ‹œ 좜처만 λͺ…κΈ°ν•˜λ©΄ λ©λ‹ˆλ‹€.

V-CECE: Visual Counterfactual Explanations via Conceptual Edits

Created by
  • Haebom
Category
Empty

μ €μž

Nikolaos Spanos, Maria Lymperaiou, Giorgos Filandrianos, Konstantinos Thomas, Athanasios Voulodimos, Giorgos Stamou

πŸ’‘ κ°œμš”

λ³Έ 논문은 기쑴의 λΈ”λž™λ°•μŠ€ λ°˜μ‚¬μ‹€μ  μ„€λͺ… 생성 방식이 νŽΈμ§‘μ˜ 의미둠적 λ‚΄μš©μ„ κ³ λ €ν•˜μ§€ μ•Šκ³ , κ³Όλ„ν•œ ν•™μŠ΅ μ˜μ‘΄μ„±μ„ κ°–λŠ”λ‹€λŠ” λ¬Έμ œμ μ„ ν•΄κ²°ν•˜κ³ μž ν•©λ‹ˆλ‹€. 이λ₯Ό μœ„ν•΄, 사전 ν•™μŠ΅λœ 이미지 νŽΈμ§‘ ν™•μ‚° λͺ¨λΈμ„ ν™œμš©ν•˜μ—¬, λΆ„λ₯˜κΈ°μ˜ λ‚΄λΆ€ 정보 없이도 졜적 νŽΈμ§‘μ— λŒ€ν•œ 이둠적 보μž₯을 λ°”νƒ•μœΌλ‘œ 단계별 νŽΈμ§‘μ„ μ œμ•ˆν•˜λŠ” μƒˆλ‘œμš΄ ν”ŒλŸ¬κ·Έ μ•€ ν”Œλ ˆμ΄ λ°©μ‹μ˜ λΈ”λž™λ°•μŠ€ λ°˜μ‚¬μ‹€μ  μ„€λͺ… 생성 ν”„λ ˆμž„μ›Œν¬ V-CECEλ₯Ό μ œμ‹œν•©λ‹ˆλ‹€. V-CECEλŠ” CNN, ViT, LVLM λ“± λ‹€μ–‘ν•œ λΆ„λ₯˜κΈ°μ—μ„œ 인간 μˆ˜μ€€μ˜ λ°˜μ‚¬μ‹€μ  μ„€λͺ…을 μƒμ„±ν•˜λ©°, κ΄‘λ²”μœ„ν•œ 인간 평가λ₯Ό 톡해 μΈκ°„μ˜ μΆ”λ‘ κ³Ό 신경망 λͺ¨λΈ 행동 κ°„μ˜ μ„€λͺ… 격차λ₯Ό λ³΄μ—¬μ€λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
V-CECEλŠ” ν•™μŠ΅ 없이 사전 ν•™μŠ΅λœ λͺ¨λΈλ§Œμ„ ν™œμš©ν•˜μ—¬ λ°˜μ‚¬μ‹€μ  μ„€λͺ…을 μƒμ„±ν•¨μœΌλ‘œμ¨, λΈ”λž™λ°•μŠ€ λͺ¨λΈμ˜ 해석 κ°€λŠ₯성을 λ†’μ΄λŠ” μƒˆλ‘œμš΄ μ ‘κ·Ό 방식을 μ œμ‹œν–ˆμŠ΅λ‹ˆλ‹€.
β€’
λ‹€μ–‘ν•œ μ’…λ₯˜μ˜ λΆ„λ₯˜κΈ°μ— 적용 κ°€λŠ₯ν•˜λ©°, 인간 평가λ₯Ό 톡해 μ„€λͺ…μ˜ μ§ˆμ„ κ²€μ¦ν•˜μ—¬, μ‹€μ œ μ‚¬μš© ν™˜κ²½μ—μ„œμ˜ μœ μš©μ„±μ„ μž…μ¦ν–ˆμŠ΅λ‹ˆλ‹€.
β€’
ν™•μ‚° λͺ¨λΈ μ˜μ‘΄μ„±, 즉, 사전 ν•™μŠ΅λœ 이미지 νŽΈμ§‘ λͺ¨λΈμ˜ μ„±λŠ₯에 따라 μ„€λͺ…μ˜ 질이 μ œν•œλ  수 있으며, νŠΉμ • 도메인에 νŠΉν™”λœ λͺ¨λΈμ΄ ν•„μš”ν•  수 μžˆμŠ΅λ‹ˆλ‹€.
πŸ‘