Sign In

Insight: Enhancing Mobile Accessibility for Blind and Visually Impaired Users with LLMs

μž‘μ„±μž
  • Haebom
μΉ΄ν…Œκ³ λ¦¬
Empty

μ €μž

Joshua Owusu Ansah, Anuj Kapoor, Ayush Khanna, Manvika Vinod, Precious Njeck, Shuai Gao

πŸ’‘ κ°œμš”

λ³Έ μ—°κ΅¬λŠ” μ‹œκ° μž₯애인(BVI) μ‚¬μš©μžλ₯Ό μœ„ν•œ κΈ°μ‘΄ λͺ¨λ°”일 μ ‘κ·Όμ„± μ„œλΉ„μŠ€(예: TalkBack)의 μˆ˜λ™μ μ΄κ³  순차적인 ν”Όλ“œλ°± ν•œκ³„λ₯Ό κ·Ήλ³΅ν•˜κ³ μž ν•©λ‹ˆλ‹€. LLM의 κ°€λŠ₯성에 μ£Όλͺ©ν•˜μ—¬, μžμ—°μ–΄ μƒν˜Έμž‘μš©κ³Ό μ‹€μ‹œκ°„ ν™”λ©΄ μš”μ•½μ„ μ œκ³΅ν•˜λŠ” μ•ˆλ“œλ‘œμ΄λ“œ μ ‘κ·Όμ„± μ„œλΉ„μŠ€μΈ "Insight"λ₯Ό μ œμ•ˆν•©λ‹ˆλ‹€. μ‹€μ œ μ‚¬μš©μž μ‹€ν—˜μ„ 톡해 Insightκ°€ TalkBack λŒ€λΉ„ 정신적 λ…Έλ ₯κ³Ό μž‘μ—… μ‹œκ°„μ„ 쀄이고 λŒ€ν™”ν˜• μΈν„°νŽ˜μ΄μŠ€λ‘œ μ„ ν˜Έλ˜μ—ˆμŒμ„ μž…μ¦ν•˜λ©°, LLM 기반 μΈν„°νŽ˜μ΄μŠ€μ˜ λͺ¨λ°”일 μ ‘κ·Όμ„± ν–₯상 잠재λ ₯을 λ³΄μ—¬μ€λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
LLM 기반의 μžμ—°μ–΄ λŒ€ν™” μΈν„°νŽ˜μ΄μŠ€κ°€ μ‹œκ° μž₯애인 μ‚¬μš©μžμ˜ λͺ¨λ°”일 κΈ°κΈ° μ‚¬μš©μ„±μ„ 획기적으둜 κ°œμ„ ν•  수 μžˆμŠ΅λ‹ˆλ‹€.
β€’
제슀처 기반 μΈν„°νŽ˜μ΄μŠ€μ™€ λŒ€ν™”ν˜• μΈν„°νŽ˜μ΄μŠ€λ₯Ό κ²°ν•©ν•œ ν•˜μ΄λΈŒλ¦¬λ“œ μ ‘κ·Ό 방식은 보닀 포괄적인 λ””μžμΈμ„ μœ„ν•œ 잠재λ ₯을 κ°€μ§‘λ‹ˆλ‹€.
β€’
μ‚¬μš©μžλŠ” λŒ€ν™” 흐름 쀑에 ν•„μš”ν•œ μ‹œμ μ— 쀑단을 κ΄€λ¦¬ν•˜λŠ” κΈ°λŠ₯의 ν•„μš”μ„±μ„ 느꼈으며, μ΄λŠ” ν–₯ν›„ μ—°κ΅¬μ—μ„œ κ°œμ„ μ μœΌλ‘œ 고렀될 수 μžˆμŠ΅λ‹ˆλ‹€.
πŸ‘