Daily Arxiv

Esta página recopila y organiza artículos sobre inteligencia artificial publicados en todo el mundo.
La información aquí presentada se resume utilizando Google Gemini y el sitio se gestiona sin fines de lucro.
Los derechos de autor de los artículos pertenecen a sus autores y a las instituciones correspondientes; al compartir el contenido, basta con citar la fuente.

Análisis comparativo de modelos de transformadores en la clasificación de tweets de desastres para la seguridad pública

Created by
  • Haebom

Autor

Sharif Noor Zisad, NM Istiak Chowdhury, Ragib Hasan

Describir

Este artículo explora la clasificación automática de tuits relacionados con desastres en plataformas de redes sociales como Twitter, una fuente crucial de información en tiempo real durante desastres y emergencias de seguridad pública. Si bien los modelos convencionales de aprendizaje automático, como la regresión logística, el Bayes ingenuo y las máquinas de vectores de soporte, tienen dificultades para comprender el contexto o el significado profundo del lenguaje informal, metafórico o ambiguo, planteamos la hipótesis y validamos experimentalmente que los modelos basados ​​en Transformer (BERT, DistilBERT, RoBERTa y DeBERTa) tendrán un mejor rendimiento. Los resultados experimentales demuestran que BERT supera significativamente a los modelos convencionales (regresión logística y Bayes ingenuo, 82%) con una precisión del 91%, lo que demuestra su capacidad para comprender mejor el lenguaje matizado mediante la integración contextual y los mecanismos de atención. Por lo tanto, demostramos que la arquitectura Transformer es más adecuada para aplicaciones de seguridad pública, ofreciendo mayor precisión, una comprensión más profunda del lenguaje y una mejor generalización a textos reales en redes sociales.

Takeaways, Limitations

Takeaways:
Demostramos que un modelo basado en Transformers logra una precisión significativamente mayor que los modelos de aprendizaje automático existentes al clasificar tweets relacionados con desastres.
Demostramos que los mecanismos de atención e inserción contextual del modelo Transformer son efectivos para comprender el lenguaje informal y ambiguo de las redes sociales.
Este estudio sugiere el potencial de los modelos basados ​​en transformadores en el campo de la seguridad pública y sugiere que pueden contribuir a una respuesta eficiente ante desastres.
Limitations:
El enfoque en la evaluación del desempeño de un modelo de transformador específico (BERT) puede carecer de un análisis comparativo detallado entre otros modelos.
Se requiere una validación adicional del rendimiento y la escalabilidad en tiempo real en situaciones de desastre reales.
Se necesitan más investigaciones para determinar la generalización en diversos orígenes lingüísticos y culturales.
👍