Daily Arxiv

Cette page résume et organise les publications en intelligence artificielle du monde entier.
Les contenus sont synthétisés grâce à Google Gemini et le service est proposé à but non lucratif.
Les droits d'auteur des articles appartiennent à leurs auteurs ou institutions respectives ; en cas de partage, il suffit d'en mentionner la source.

Analyse comparative des modèles de transformateurs dans la classification des tweets en cas de catastrophe pour la sécurité publique

Created by
  • Haebom

Auteur

Sharif Noor Zisad, NM Istiak Chowdhury, Ragib Hasan

Contour

Cet article explore la classification automatique des tweets liés aux catastrophes sur les plateformes de médias sociaux comme Twitter, une source cruciale d'informations en temps réel lors de catastrophes et d'urgences de sécurité publique. Alors que les modèles d'apprentissage automatique conventionnels, tels que la régression logistique, la méthode Bayes naïve et les machines à vecteurs de support, peinent à comprendre le contexte ou le sens profond du langage informel, métaphorique ou ambigu, nous émettons l'hypothèse et validons expérimentalement que les modèles basés sur Transformer (BERT, DistilBERT, RoBERTa et DeBERTa) seront plus performants. Les résultats expérimentaux démontrent que BERT surpasse significativement les modèles conventionnels (régression logistique et méthode Bayes naïve, 82 %) avec une précision de 91 %, démontrant sa capacité à mieux comprendre le langage nuancé grâce à des mécanismes d'intégration contextuelle et d'attention. Par conséquent, nous démontrons que l'architecture Transformer est plus adaptée aux applications de sécurité publique, offrant une précision accrue, une compréhension plus approfondie du langage et une meilleure généralisation aux textes des médias sociaux du monde réel.

Takeaways, Limitations

Takeaways:
Nous démontrons qu’un modèle basé sur Transformer atteint une précision nettement supérieure à celle des modèles d’apprentissage automatique existants dans la classification des tweets liés aux catastrophes.
Nous démontrons que les mécanismes d’intégration contextuelle et d’attention du modèle Transformer sont efficaces pour comprendre le langage informel et ambigu des médias sociaux.
Cette étude suggère le potentiel des modèles basés sur les transformateurs dans le domaine de la sécurité publique et suggère qu’ils peuvent contribuer à une réponse efficace aux catastrophes.
Limitations:
L’accent mis sur l’évaluation des performances d’un modèle de transformateur spécifique (BERT) peut manquer d’analyse comparative détaillée entre d’autres modèles.
Une validation supplémentaire des performances en temps réel et de l’évolutivité dans des situations de catastrophe réelles est nécessaire.
Des recherches supplémentaires sont nécessaires pour déterminer la généralisabilité à travers divers contextes linguistiques et culturels.
👍