Sign In

MemeScouts@LT-EDI 2026: Asking the Right Questions -- Prompted Weak Supervision for Meme Hate Speech Detection

Created by
  • Haebom
Category
Empty

μ €μž

Ivo Bueno, Lea Hirlimann, Enkelejda Kasneci

πŸ’‘ κ°œμš”

λ³Έ 논문은 밈(meme)의 λ©€ν‹°λͺ¨λ‹¬ νŠΉμ„±κ³Ό 문화적 λ§₯락으둜 인해 탐지가 μ–΄λ €μš΄ 혐였 λ°œμ–Έ(hate speech) 문제λ₯Ό ν•΄κ²°ν•˜κΈ° μœ„ν•΄, ν”„λ‘¬ν”„νŠΈ 기반 μ•½ν•œ 지도 ν•™μŠ΅(Prompted Weak Supervision, PWS) 접근법을 μ œμ•ˆν•œλ‹€. μ œμ•ˆλœ PWS 방식은 밈 이해 과정을 질문 기반의 λ ˆμ΄λΈ”λ§ ν•¨μˆ˜(labeling function)둜 λΆ„ν•΄ν•˜μ—¬ 동성애 혐였 및 νŠΈλžœμŠ€μ  λ” 혐였 탐지에 μ μš©ν•˜λ©°, Qwen3-VLM을 ν™œμš©ν•˜μ—¬ νƒ€κ²Ÿ μ§ˆλ¬Έμ— λŒ€ν•œ 닡변을 톡해 νŠΉμ§•μ„ μΆ”μΆœν•œλ‹€. 이λ₯Ό 톡해 λ‹€κ΅­μ–΄ ν™˜κ²½μ—μ„œ 직접적인 VLM λΆ„λ₯˜λ³΄λ‹€ μš°μˆ˜ν•œ μ„±λŠ₯을 보이며, 특히 μ˜μ–΄, 쀑ꡭ어, νžŒλ””μ–΄μ—μ„œ μƒμœ„κΆŒμ„ λ‹¬μ„±ν–ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
λ©€ν‹°λͺ¨λ‹¬ 혐였 λ°œμ–Έ νƒμ§€μ—μ„œ PWS 접근법이 기쑴의 직접적인 VLM λΆ„λ₯˜λ³΄λ‹€ νš¨κ³Όμ μž„μ„ μž…μ¦ν–ˆλ‹€.
β€’
특히 λ‹€κ΅­μ–΄ ν™˜κ²½μ—μ„œ PWSλŠ” 언어별 μ„±λŠ₯ ν–₯상에 κΈ°μ—¬ν•˜λ©°, 쀑ꡭ어와 νžŒλ””μ–΄μ—μ„œ μƒλ‹Ήν•œ κ°œμ„ μ„ λ³΄μ˜€λ‹€.
β€’
질문 기반의 λΆ„ν•΄λœ λ ˆμ΄λΈ”λ§ ν•¨μˆ˜μ™€ νŠΉμ§• μΆ”μΆœ 방식은 밈의 λ³΅μž‘ν•œ 의미λ₯Ό 효과적으둜 νŒŒμ•…ν•˜λŠ” 데 κΈ°μ—¬ν•œλ‹€.
β€’
반볡적인 였λ₯˜ 기반의 λ ˆμ΄λΈ”λ§ ν•¨μˆ˜ ν™•μž₯ 및 νŠΉμ§• κ°€μ§€μΉ˜κΈ°λ₯Ό 톡해 λͺ¨λΈμ˜ μΌλ°˜ν™” μ„±λŠ₯을 ν–₯μƒμ‹œν‚¬ 수 μžˆλ‹€.
β€’
ν–₯ν›„ κ³Όμ œλ‘œλŠ” 더 λ‹€μ–‘ν•œ μ’…λ₯˜μ˜ 혐였 λ°œμ–Έ 및 문화적 λ§₯락을 ν¬κ΄„ν•˜λŠ” PWS ν”„λ ˆμž„μ›Œν¬ 개발과, λ ˆμ΄λΈ”λ§ ν•¨μˆ˜ μ„€κ³„μ˜ νš¨μœ¨μ„± 및 μžλ™ν™” λ°©μ•ˆ 연ꡬ가 μžˆμ„ 수 μžˆλ‹€.
πŸ‘