Daily Arxiv

Esta página recopila y organiza artículos sobre inteligencia artificial publicados en todo el mundo.
La información aquí presentada se resume utilizando Google Gemini y el sitio se gestiona sin fines de lucro.
Los derechos de autor de los artículos pertenecen a sus autores y a las instituciones correspondientes; al compartir el contenido, basta con citar la fuente.

StreetViewAI: Haciendo que Street View sea accesible mediante IA multimodal sensible al contexto

Created by
  • Haebom

Autor

Jon E. Froehlich, Alexander Fiannaca, Nimer Jaber, Victor Tsara, Shaun Kane

Describir

StreetViewAI es la primera herramienta de Street View accesible para personas con discapacidad visual. Las herramientas de mapeo urbano interactivo existentes, como Google Street View (GSV) y Meta Mapillary, permiten a los usuarios explorar y experimentar virtualmente entornos reales a través de imágenes inmersivas de 360 ​​grados, pero son fundamentalmente inaccesibles para personas con discapacidad visual. StreetViewAI resuelve este problema combinando IA multimodal contextual, controles de navegación accesibles y voz interactiva. Las personas ciegas pueden explorar virtualmente la colección distribuida de GSV, compuesta por más de 220 000 millones de imágenes y más de 100 países, explorar destinos en detalle y planificar rutas remotas. La usabilidad de StreetViewAI se demostró mediante un proceso de diseño iterativo con un equipo multidisciplinario y evaluaciones con 11 usuarios ciegos.

Takeaways, Limitations

Takeaways: Proporciona accesibilidad a Street View para personas con discapacidad visual, ofreciendo nuevas posibilidades para la investigación de puntos de interés y la planificación remota de rutas. Presenta un enfoque de diseño que proporciona una accesibilidad eficaz mediante una combinación de IA multimodal, controles de navegación accesibles y voz interactiva. Demuestra la importancia de un proceso de diseño iterativo con la participación del usuario.
Limitations: Actualmente, solo se evalúa a 11 usuarios con discapacidad visual, y se requiere más investigación con una base de usuarios más amplia. Se requiere mayor investigación para identificar posibles problemas y áreas de mejora durante el uso a largo plazo. También se requieren más pruebas de accesibilidad para usuarios con diversos tipos de discapacidad visual.
👍