[공지사항]을 빙자한 안부와 근황 
Show more

Daily Arxiv

Cette page résume et organise les publications en intelligence artificielle du monde entier.
Les contenus sont synthétisés grâce à Google Gemini et le service est proposé à but non lucratif.
Les droits d'auteur des articles appartiennent à leurs auteurs ou institutions respectives ; en cas de partage, il suffit d'en mentionner la source.

Identification des groupes de tâches pour l'apprentissage multitâche à l'aide d'informations utilisables ponctuellement

Created by
  • Haebom

Auteur

Yingya Li, Timothy Miller, Steven Bethard, Guergana Savova

Contour

Cet article souligne l'importance du regroupement de tâches dans l'apprentissage multitâche et propose une nouvelle mesure permettant d'identifier les groupes de tâches optimaux en mesurant la corrélation entre les tâches. Nous présentons notamment une méthode de mesure de la difficulté des tâches basée sur des informations utilisables ponctuellement (IVP) et des tâches groupées avec des estimations d'IVP statistiquement similaires. Grâce à des expériences sur 15 jeux de données de TALN issus des domaines général, biomédical et clinique, nous vérifions l'efficacité de la méthode proposée par rapport aux méthodes existantes, notamment Llama 2 et GPT-4. Les résultats expérimentaux montrent que les tâches regroupées selon l'IVP atteignent des performances compétitives avec moins de paramètres et affichent des performances constantes dans tous les domaines.

Takeaways, Limitations_

Takeaways:
Nous démontrons expérimentalement que le regroupement de tâches basé sur le PVI est efficace pour améliorer les performances de l’apprentissage multitâche.
Obtenez des performances compétitives avec des méthodes existantes et des modèles linguistiques à grande échelle, même avec un petit nombre de paramètres.
Des performances constantes dans une variété de domaines (général, biomédical, clinique).
Présentation de nouvelles mesures pour mesurer la pertinence du travail.
Limitations:
Des recherches supplémentaires sont nécessaires sur le coût de calcul et l’efficacité des calculs PVI.
Une validation supplémentaire des performances de généralisation de l’indicateur proposé est nécessaire.
Il existe une possibilité de biais envers certains domaines ou types de travail.
Des expériences supplémentaires sur différents types de tâches et ensembles de données sont nécessaires.
👍