Daily Arxiv

Cette page résume et organise les publications en intelligence artificielle du monde entier.
Les contenus sont synthétisés grâce à Google Gemini et le service est proposé à but non lucratif.
Les droits d'auteur des articles appartiennent à leurs auteurs ou institutions respectives ; en cas de partage, il suffit d'en mentionner la source.

Attention à l'écart : la divergence entre les tâches humaines et celles générées par le LLM

Created by
  • Haebom

Auteur

Yi-Long Lu, Jiajun Song, Chunhui Zhang, Wei Wang

Contour

Cet article a mené des expériences de génération de tâches avec des humains et GPT-4o afin de déterminer si les agents génératifs basés sur des modèles de langage à grande échelle (MLL) génèrent des tâches de manière humaine. Nos résultats montrent que si la génération de tâches humaines est systématiquement influencée par des valeurs personnelles comme l'ouverture à l'expérience et des facteurs psychologiques comme le style cognitif, les LLM ne reflètent pas ces schémas comportementaux, même lorsqu'ils sont explicitement dotés de facteurs psychologiques. Les tâches générées par les LLM étaient moins sociales, moins exigeantes physiquement et plus axées sur des sujets abstraits. Bien que les tâches générées par les LLM aient été jugées plus engageantes et novatrices, cela démontre un écart entre les compétences linguistiques des LLM et leur capacité à générer des objectifs concrets et humains. En conclusion, il existe une différence fondamentale entre la nature concrète et axée sur les valeurs de la cognition humaine et les modèles statistiques des LLM. Concevoir des agents plus centrés sur l'humain nécessite d'intégrer la motivation intrinsèque et les fondements physiques.

Takeaways, Limitations

Takeaways:
Nous avons constaté que la création d’œuvres humaines est considérablement influencée par les valeurs personnelles et les styles cognitifs.
Contrairement aux humains, les LLM ne sont pas sociaux, ont moins d’activité physique et ont tendance à produire des tâches abstraites.
Il existe un écart entre les capacités linguistiques des titulaires d’un LLM et les capacités humaines de génération d’objectifs.
L’intégration de la motivation intrinsèque et des fondements physiques est essentielle pour développer des agents centrés sur l’humain.
Limitations:
Les expériences GPT-4o ont été menées en utilisant un seul LLM, ce qui limite la généralisabilité.
Il est possible que les performances du LLM n’aient pas été correctement évaluées en raison de limitations dans la manière dont les motivations psychologiques ont été fournies au LLM.
Un examen plus approfondi de la fiabilité des résultats est nécessaire en raison du manque d’informations sur le nombre et la diversité des participants à l’étude.
👍