Sign In

Decomposed Vision-Language Alignment for Fine-Grained Open-Vocabulary Segmentation

μž‘μ„±μž
  • Haebom
μΉ΄ν…Œκ³ λ¦¬
Empty

μ €μž

Chenhao Wang, Yingrui Ji, Yu Meng, Yao Zhu

πŸ’‘ κ°œμš”

κΈ°μ‘΄ κ°œλ°©ν˜• μ–΄νœ˜ λΆ„ν•  λͺ¨λΈμ€ λ³΅μž‘ν•œ ν…μŠ€νŠΈ μ„€λͺ…을 κ°œλ³„ 의미 λ‹¨μœ„λ‘œ λΆ„ν•΄ν•˜μ§€ λͺ»ν•΄ 보지 λͺ»ν•œ λ²”μ£Ό-속성 쑰합에 λŒ€ν•œ μΌλ°˜ν™” μ„±λŠ₯이 λ–¨μ–΄μ§€λŠ” 문제λ₯Ό κ²ͺμŠ΅λ‹ˆλ‹€. λ³Έ 논문은 ν…μŠ€νŠΈ ν”„λ‘¬ν”„νŠΈλ₯Ό κ°œλ… 토큰과 속성 ν† ν°μœΌλ‘œ λͺ…μ‹œμ μœΌλ‘œ λΆ„ν•΄ν•˜κ³ , 이λ₯Ό 톡해 각 의미 λ‹¨μœ„μ— λŒ€ν•΄ κ°œλ³„μ μΈ ꡐ차 λͺ¨λ‹¬ μƒν˜Έμž‘μš©μ„ μˆ˜ν–‰ν•˜λŠ” λΆ„ν•΄λœ λΉ„μ „-μ–Έμ–΄ μ •λ ¬ ν”„λ ˆμž„μ›Œν¬λ₯Ό μ œμ•ˆν•©λ‹ˆλ‹€. μ œμ•ˆλœ 방법은 속성별 κ²Œμ΄νŒ… 맡을 μƒμ„±ν•˜μ—¬ 정보λ₯Ό κ³±μ…ˆ λ°©μ‹μœΌλ‘œ μœ΅ν•©ν•˜λŠ” νŠΉμ§• μœ΅ν•© λͺ¨λ“ˆκ³Ό μ•ˆμ •μ μ΄κ³  해석 κ°€λŠ₯ν•œ μ—°μ‚° 처리λ₯Ό μœ„ν•œ 점수 μœ΅ν•© 방식을 톡해 μ„±λŠ₯을 ν–₯μƒμ‹œν‚΅λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
ν…μŠ€νŠΈ μ„€λͺ…을 κ°œλ…κ³Ό μ†μ„±μœΌλ‘œ λΆ„ν•΄ν•˜μ—¬ κ°œλ°©ν˜• μ–΄νœ˜ λΆ„ν• μ˜ μΌλ°˜ν™” μ„±λŠ₯을 효과적으둜 ν–₯μƒμ‹œν‚¬ 수 μžˆμŠ΅λ‹ˆλ‹€.
β€’
μ œμ•ˆλœ ν”„λ ˆμž„μ›Œν¬λŠ” κΈ°μ‘΄ 트랜슀포머 기반 λΆ„ν•  λͺ¨λΈμ— μ‰½κ²Œ 톡합될 수 μžˆμ–΄ μ‹€μš©μ μž…λ‹ˆλ‹€.
β€’
보지 λͺ»ν•œ 속성-λ²”μ£Ό 쑰합에 λŒ€ν•œ λ―Έμ„Έν•œ μˆ˜μ€€μ˜ λΆ„ν• μ—μ„œ SIGNIFICANTν•œ μ„±λŠ₯ κ°œμ„ μ„ λ³΄μ—¬μ€λ‹ˆλ‹€.
β€’
ν–₯ν›„ μ—°κ΅¬μ—μ„œλŠ” λ”μš± λ³΅μž‘ν•˜κ³  λ‹€μ–‘ν•œ 속성을 가진 ν…μŠ€νŠΈ μ„€λͺ…에 λŒ€ν•œ 처리 λŠ₯λ ₯ κ°•ν™” 및 계산 νš¨μœ¨μ„± μ΅œμ ν™”κ°€ ν•„μš”ν•  수 μžˆμŠ΅λ‹ˆλ‹€.
πŸ‘
Made with Slashpage