Daily Arxiv

Cette page résume et organise les publications en intelligence artificielle du monde entier.
Les contenus sont synthétisés grâce à Google Gemini et le service est proposé à but non lucratif.
Les droits d'auteur des articles appartiennent à leurs auteurs ou institutions respectives ; en cas de partage, il suffit d'en mentionner la source.

Les grands modèles linguistiques ne simulent pas la psychologie humaine

Created by
  • Haebom

Auteur

Sarah Schröder, Thekla Morgenroth, Ulrike Kuhl, Valérie Vaquet, Benjamin Paa{\ss}fr

Contour

Cet article examine de manière critique l'hypothèse selon laquelle les modèles de langage à grande échelle (MLH), tels que ChatGPT, peuvent remplacer les participants humains dans la recherche psychologique. Nous présentons des arguments conceptuels à l'appui de l'hypothèse selon laquelle les LMH simulent la psychologie humaine et fournissons des preuves empiriques à l'aide de plusieurs LMH, dont le modèle CENTAUR, spécifiquement adapté aux réponses psychologiques. Nous démontrons que des différences significatives apparaissent entre les LMH et les réponses humaines lorsque de subtils changements de mots entraînent d'importants changements sémantiques, et que différents LMH présentent des réponses très différentes à de nouveaux éléments, démontrant ainsi leur manque de fiabilité. En conclusion, nous soutenons que les LMH ne simulent pas la psychologie humaine et que les chercheurs en psychologie devraient les considérer comme des outils utiles, mais fondamentalement peu fiables, nécessitant une validation par rapport aux réponses humaines pour toute nouvelle application.

Takeaways, Limitations

Takeaways: Bien que les LLM puissent être un outil utile pour la recherche psychologique, ils ne peuvent remplacer complètement les participants humains. Les résultats des LLM doivent toujours être comparés et validés avec les réponses humaines. Il est important de reconnaître les limites des LLM et de faire preuve de prudence dans la conception et l'interprétation des recherches.
Limitations: Cette étude pourrait avoir une généralisation limitée en raison de son recours à un LLM spécifique et d'un ensemble de données limité. Des recherches supplémentaires sont nécessaires sur différents types de recherche en psychologie et de LLM. Compte tenu du rythme rapide de développement des LLM, il est incertain que les conclusions de cette étude soient valables à long terme.
👍