Étude sur ChatGPT dans l'éducation : rétractation après drapeaux rouges

Introduction

Une étude qui affirmait que ChatGPT d'OpenAI peut avoir un impact positif sur l'apprentissage des étudiants a été rétractée près d'un an après sa publication. Le rédacteur en chef de la revue, Springer Nature, a cité des « discordances » dans l'analyse et un manque de confiance dans les conclusions.

Contexte Technique

L'étude en question a tenté de quantifier « l'effet de ChatGPT sur la performance d'apprentissage, la perception de l'apprentissage et la pensée d'ordre supérieur » en analysant les résultats de 51 études de recherche antérieures. La méta-analyse a calculé la taille de l'effet entre les groupes expérimentaux de différentes études qui utilisaient ChatGPT dans l'éducation et les groupes de contrôle qui n'utilisaient pas le chatbot IA.

Ben Williamson, un enseignant senior au Centre de recherche en éducation numérique et à l'Institut des futurs d'Édimbourg de l'Université d'Édimbourg en Écosse, a souligné que l'étude synthétisait des études de très mauvaise qualité ou melangeait des résultats de études qui ne pouvaient pas être comparées avec précision en raison de méthodes, de populations et d'échantillons très différents.

Analyse et Implications

Les résultats de l'étude, maintenant rétractés, ont montré que « ChatGPT a un impact positif important sur l'amélioration de la performance d'apprentissage » ainsi qu'un « impact modérément positif sur l'amélioration de la perception de l'apprentissage » et la « promotion de la pensée d'ordre supérieur ». L'étude a été publiée dans la revue Humanities & Social Sciences Communications, publiée par Springer Nature le 6 mai 2025.

Williamson a également remis en question le moment de la publication de l'étude, seulement deux ans et demi après la sortie de ChatGPT par OpenAI en novembre 2022. « Il n'est pas réalisable que des dizaines d'études de haute qualité sur ChatGPT et la performance d'apprentissage aient pu être menées, examinées et publiées dans ce laps de temps », a déclaré Williamson.

Perspective

Depuis sa publication, l'étude a été citée 262 fois dans d'autres articles publiés dans des revues à comité de lecture de Springer Nature et a reçu un total de 504 citations de sources à comité de lecture et non à comité de lecture. Elle a également attiré près d'un demi-million de lecteurs et a reçu suffisamment d'attention en ligne pour se classer dans le 99e percentile pour les articles de revue en termes de score d'attention.