Sign In

Audit After Segmentation: Reference-Free Mask Quality Assessment for Language-Referred Audio-Visual Segmentation

Created by
  • Haebom
Category
Empty

μ €μž

Jinxing Zhou, Yanghao Zhou, Yaoting Wang, Zongyan Han, Jiaqi Ma, Henghui Ding, Rao Muhammad Anwer, Hisham Cholakkal

πŸ’‘ κ°œμš”

λ³Έ 논문은 μžμ—°μ–΄ μ„€λͺ…을 기반으둜 μ˜€λ””μ˜€-λΉ„λ””μ˜€ 객체 λΆ„ν• (Ref-AVS) μž‘μ—…μ—μ„œ μƒμ„±λœ λΆ„ν•  마슀크의 ν’ˆμ§ˆμ„ ν‰κ°€ν•˜λŠ” μƒˆλ‘œμš΄ 과제인 MQA-RefAVSλ₯Ό μ œμ•ˆν•©λ‹ˆλ‹€. λ³„λ„μ˜ μ •λ‹΅ 마슀크 μ°Έμ‘° 없이도 마슀크의 IoU μΆ”μ •, 였λ₯˜ μœ ν˜• 식별, ν’ˆμ§ˆ 관리 결정을 λ‚΄λ¦¬λŠ” 것을 λͺ©ν‘œλ‘œ ν•©λ‹ˆλ‹€. 이λ₯Ό μœ„ν•΄ λ‹€μ–‘ν•œ 였λ₯˜ λͺ¨λ“œλ₯Ό ν¬ν•¨ν•˜λŠ” MQ-RAVSBench 벀치마크λ₯Ό κ΅¬μΆ•ν•˜κ³ , 닀쀑 λͺ¨λ“œ 정보λ₯Ό ν™œμš©ν•˜λŠ” MLLM 기반 κ°μ‚¬μžμΈ MQ-Auditorλ₯Ό μ œμ•ˆν•˜μ—¬ κΈ°μ‘΄ μ‹œμŠ€ν…œλ³΄λ‹€ λ›°μ–΄λ‚œ μ„±λŠ₯을 λ³΄μ˜€μŠ΅λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
Ref-AVS μž‘μ—…μ˜ 해석 κ°€λŠ₯성을 λ†’μ—¬ λΆ„ν•  마슀크의 ν’ˆμ§ˆ 진단 및 κ°œμ„ μ„ μœ„ν•œ κΈ°λ°˜μ„ λ§ˆλ ¨ν–ˆμŠ΅λ‹ˆλ‹€.
β€’
μ •λ‹΅ μ°Έμ‘° 없이도 마슀크 ν’ˆμ§ˆμ„ 평가할 수 μžˆλŠ” 효율적인 방법을 μ œμ‹œν•˜μ—¬ μ‹€μ œ 적용 κ°€λŠ₯성을 λ†’μ˜€μŠ΅λ‹ˆλ‹€.
β€’
MQ-AuditorλŠ” 닀쀑 λͺ¨λ“œ 정보와 마슀크 자체 정보λ₯Ό μ’…ν•©μ μœΌλ‘œ κ³ λ €ν•˜μ—¬ μ •λŸ‰μ , 정성적 평가λ₯Ό μˆ˜ν–‰ν•©λ‹ˆλ‹€.
β€’
MQ-RAVSBench 벀치마크의 λ‹€μ–‘μ„±κ³Ό λŒ€ν‘œμ„±μ΄ μ‹€μ œ λ‹€μ–‘ν•œ Ref-AVS μ‹œμŠ€ν…œμ˜ 였λ₯˜ λͺ¨λ“œλ₯Ό μ–Όλ§ˆλ‚˜ 잘 포괄할 수 μžˆλŠ”μ§€μ— λŒ€ν•œ μΆ”κ°€ 검증이 ν•„μš”ν•©λ‹ˆλ‹€.
πŸ‘
Made with Slashpage