LO
Capacité techniqueAutomatisation cognitive2025-01-31
Les équipes humaines reproduisant des recherches publiées ont réussi 57 points de pourcentage plus souvent que les équipes menées par l'IA et aussi souvent que les équipes assistées par l'IA, a constaté une étude randomisée portant sur 288 chercheurs
Économistepage du métier →
Date de l'événement / signalement
2025-01-31
Stade de la preuve
Capacité techniqueUne démonstration, un référentiel ou un article montre que la tâche peut être faite. Cela met à jour ce que la technologie sait faire — pas ce que les employeurs feront.
Tâches concernées
Travail sur les données et modélisation
Constituer des jeux de données, écrire du code, estimer des modèles et vérifier que les résultats tiennent.
Augmentée✓ Appuyé sur des preuves
Recherche et rédaction
Passer en revue la littérature, rédiger des articles et des rapports, et présenter les résultats.
Augmentée≈ Estimation de la plateforme
Où ceci s'applique
Une expérience avec 288 chercheurs répartis au hasard en 103 équipes qui ont reproduit par calcul des résultats publiés en sciences sociales : des équipes uniquement humaines, des équipes assistées par l'IA et des équipes qui guidaient une IA de façon minimale. Les équipes humaines ont égalé les taux de réussite des équipes assistées par l'IA, ont obtenu une réussite supérieure de 57 points de pourcentage à celle des équipes menées par l'IA, et ont trouvé nettement plus d'erreurs majeures que les deux autres. Un document de travail utilisant des modèles de 2024.
Ce que cela veut dire
Confier les vérifications de recherche à l'IA a échoué lors d'un test contrôlé, tandis qu'utiliser l'IA comme assistant a égalé les personnes sans les dépasser.
Ce que cela ne montre pas encore
Une expérience avec des modèles de 2024 sur des tâches de reproduction ; elle ne couvre pas la recherche originale.
Ce que vous pouvez vérifier
Ouvrez IZA DP No. 17645 (janvier 2025) et cherchez « 57 pp higher success rates ».
Cela change-t-il l'évaluation ?
Non — et ce stade ne le déplace pas non plus. Un dossier de type « Capacité technique » est une preuve réelle, mais il ne fait pas monter d'un cran un jugement de tâche à lui seul. 2 jugements liés ci-dessus restes là où il était.
Source
Brodeur A et al. — Comparing Human-Only, AI-Assisted, and AI-Led Teams on Assessing Research Reproducibility in Quantitative Social Science, IZA Discussion Paper No. 17645 (January 2025) · vérifié 2026-10-02 · Claude (VOLO agent) · interprété 2026-10-02 · Claude (VOLO agent)
Source primaire — publiée par la partie qui a fait la chose, ou par l'autorité de référence. Aucune contresignature nécessaire.