Daily Arxiv

Cette page résume et organise les publications en intelligence artificielle du monde entier.
Les contenus sont synthétisés grâce à Google Gemini et le service est proposé à but non lucratif.
Les droits d'auteur des articles appartiennent à leurs auteurs ou institutions respectives ; en cas de partage, il suffit d'en mentionner la source.

De la performance du modèle à la revendication : comment un changement d'orientation dans la reproductibilité de l'apprentissage automatique peut contribuer à combler le fossé des responsabilités

Created by
  • Haebom

Auteur

Tianqi Kou

Contour

Cet article aborde le double objectif d'amélioration de la reproductibilité et de la responsabilité dans la recherche en apprentissage automatique, soulignant que ces deux objectifs sont abordés dans des contextes différents : la reproductibilité fondée sur le raisonnement scientifique et la responsabilité fondée sur le raisonnement éthique. Plus précisément, pour combler le « déficit de responsabilité », où les scientifiques en apprentissage automatique sont souvent tenus responsables en raison de leur éloignement de la recherche appliquée, nous proposons le concept de reproductibilité des revendications, plutôt que de reproductibilité des performances des modèles. Nous soutenons que la reproductibilité des revendications est utile pour tenir les scientifiques en apprentissage automatique responsables lorsqu'ils formulent des revendications non reproductibles susceptibles d'entraîner des préjudices en raison d'une mauvaise utilisation ou d'une mauvaise compréhension. À cette fin, nous définissons deux types de reproductibilité et présentons leurs avantages. De plus, nous présentons la mise en œuvre de la reproductibilité des revendications comme un projet social, et non comme un défi technique, et nous abordons les principes épistémologiques concurrents, la circulation des références, le travail d'interprétation et les implications pratiques pour la communication de la recherche.

Takeaways, Limitations

Takeaways:
Une nouvelle perspective pour améliorer la reproductibilité et la responsabilité dans la recherche sur l'apprentissage automatique (reproductibilité des revendications)
Proposer une approche pratique pour combler le déficit de responsabilité
Deux types de définitions de la reproductibilité qui peuvent faciliter des discussions constructives sur la reproductibilité.
Présentation des défis sociaux et techniques liés à la mise en œuvre de la reproductibilité des revendications
Limitations:
Manque de présentation claire des critères d’évaluation spécifiques et des méthodes de mesure de la reproductibilité des revendications.
Manque de prise en compte suffisante des difficultés et des conflits qui peuvent survenir lors du processus de mise en œuvre du projet social de revendication de reproductibilité.
Des recherches supplémentaires sont nécessaires pour examiner la généralisabilité de l’application du concept de reproductibilité des revendications à la recherche sur l’apprentissage automatique dans divers domaines.
👍