[공지사항]을 빙자한 안부와 근황 
Show more

Daily Arxiv

Cette page résume et organise les publications en intelligence artificielle du monde entier.
Les contenus sont synthétisés grâce à Google Gemini et le service est proposé à but non lucratif.
Les droits d'auteur des articles appartiennent à leurs auteurs ou institutions respectives ; en cas de partage, il suffit d'en mentionner la source.

Ensemble de données résultant de l'étude utilisateur sur la compréhensibilité des algorithmes d'IA explicables

Created by
  • Haebom

Auteur

Szymon Bobek, Paloma Koryci nska, Monika Krakowska, Maciej Mozolewski, Dorota Rak, Magdalena Zych, Magdalena W ojcik, Grzegorz J. Nalepa

Contour

Cet article présente un ensemble de données de résultats de recherche utilisateur sur l'intelligibilité des algorithmes d'intelligence artificielle explicable (IAX). Les participants, sélectionnés parmi 149 candidats, ont été répartis en trois groupes : experts en mycologie (DE), étudiants en science des données et visualisation (IT), et étudiants en sciences sociales et humaines (SSH). Le contenu principal de l'ensemble de données se compose de 39 transcriptions d'entretiens au cours desquels les participants ont dû effectuer une série de tâches et de questions liées à l'interprétation des explications des décisions d'un modèle d'apprentissage automatique entraîné à distinguer les champignons comestibles des champignons non comestibles. Les transcriptions contiennent des données supplémentaires telles que des visualisations des explications présentées à l'utilisateur, les résultats d'une analyse thématique, des recommandations pour améliorer les explications fournies par les participants et les résultats d'une enquête initiale qui donne un aperçu des connaissances du domaine et des compétences en analyse de données des participants. Un étiquetage manuel des transcriptions a été effectué pour une correspondance automatique entre le texte et d'autres données relatives à une partie spécifique. Compte tenu du développement rapide des technologies d'IAX, la nécessité d'une évaluation qualitative multidisciplinaire de l'explicabilité est l'un des sujets émergents de la communauté. Cet ensemble de données offre un large éventail de possibilités pour l’analyse des données collectées ainsi que pour la réplication de la recherche.

Takeaways, Limitations

Takeaways:
Nous fournissons un nouvel ensemble de données pour l'évaluation multidisciplinaire et qualitative de la compréhensibilité des algorithmes XAI.
Cela nous permet d’évaluer la compréhensibilité générale des explications XAI en incluant les contributions de participants d’horizons divers, notamment la mycologie, la science des données et les sciences sociales.
Il fournit une variété de données supplémentaires, telles que des visualisations d'explications, des résultats d'analyse de sujets et des recommandations d'amélioration, permettant une analyse approfondie.
Souligne l’importance de la méthodologie de recherche qualitative dans la recherche XAI.
Limitations:
L'ensemble de données peut avoir une généralisabilité limitée car il est limité à un modèle d'apprentissage automatique spécifique (modèle de classification des champignons comestibles/non comestibles) et à un domaine spécifique (mycologie).
Le nombre de participants était relativement faible, ce qui peut rendre les généralisations statistiques difficiles.
Il existe un risque d’erreur car il faut recourir à un marquage manuel.
👍