Daily Arxiv

Esta página recopila y organiza artículos sobre inteligencia artificial publicados en todo el mundo.
La información aquí presentada se resume utilizando Google Gemini y el sitio se gestiona sin fines de lucro.
Los derechos de autor de los artículos pertenecen a sus autores y a las instituciones correspondientes; al compartir el contenido, basta con citar la fuente.

Aprovechamiento de modelos lingüísticos de gran tamaño para una traducción precisa del lenguaje de señas en situaciones de bajos recursos

Created by
  • Haebom

Autor

Luana Bulla, Gabriele Tuccio, Misael Mongiov i, Aldo Gangemi

Describir

Este artículo propone AulSign, un método novedoso que utiliza modelos lingüísticos a gran escala (LLM) para abordar los desafíos de la traducción del lenguaje natural a la lengua de señas y la escasez de datos disponibles. AulSign aplica las capacidades de procesamiento de texto de los LLM a la traducción de la lengua de señas aprovechando el aprendizaje contextual mediante indicaciones dinámicas, selección de muestras y posterior asociación de la lengua de señas. Los LLM abordan la falta de conocimiento de la lengua de señas al vincularla con las descripciones en lenguaje natural. Experimentos con los conjuntos de datos SignBank+ y LaCAM CNR-ISTC para inglés e italiano demuestran que AulSign supera a los modelos existentes de mejor rendimiento en entornos con pocos datos. Este enfoque tiene el potencial de mejorar la accesibilidad y la inclusión de las comunidades lingüísticas desatendidas.

Takeaways, Limitations

Takeaways:
LLM presenta nuevas posibilidades para la traducción de lengua de señas.
Presentando una forma efectiva de resolver el problema de la escasez de datos.
Contribuir a mejorar la accesibilidad y la inclusión de las comunidades lingüísticas marginadas
Logre un mejor rendimiento que los modelos existentes en entornos con pocos datos.
Limitations:
Se necesita más investigación sobre la escala y diversidad de los conjuntos de datos utilizados.
Posibilidad de no reflejar plenamente las características visuales y espaciales de la lengua de señas
Es necesario verificar el rendimiento de generalización para varios lenguajes de señas.
La dificultad de trasladar con precisión las descripciones del lenguaje natural al lenguaje de señas.
👍