Fejlbehæftet forskning om ChatGPT i skolen

En videnskabelig artikel, der påstod, at OpenAI’s ChatGPT kan styrke elevers læring, er blevet trukket tilbage af tidsskriftet Nature. Springer Nature, der udgiver tidsskriftet, begrundede tilbagetrækningen med "discrepancies" i analysen og manglende troværdighed i konklusionerne. Artiklen var allerede blevet citeret hundredvis af gange og delt flittigt på sociale medier.

Hvad hævdede undersøgelsen?

Forskerne bag undersøgelsen påstod, at de havde fundet beviser for, at ChatGPT forbedrer elevers læringsresultater, opfattelse af læring og evner til kritisk tænkning. De havde gennemført en metaanalyse af 51 tidligere studier, hvor de sammenlignede grupper, der brugte ChatGPT i undervisningen, med kontrolgrupper, der ikke gjorde det.

Hvorfor blev undersøgelsen trukket tilbage?

Springer Nature fandt alvorlige fejl i den metodiske tilgang. Ifølge tidsskriftet var der uklarheder i analysen og manglende dokumentation for konklusionerne. Dette førte til, at artiklen ikke længere kunne opretholde videnskabelig troværdighed.

"Undersøgelsen blev af mange betragtet som det første solide bevis på, at generativ AI som ChatGPT kan gavne elevers læring. Men det viste sig at være en fejlslutning," siger Ben Williamson, lektor ved Centre for Research in Digital Education og Edinburgh Futures Institute på University of Edinburgh.

Reaktioner fra forskningsverdenen

Nyheden om tilbagetrækningen har skabt debat blandt forskere og uddannelsesfolk. Mange peger på, hvor vigtigt det er med gennemsigtighed og korrekt metodisk tilgang i forskning om ny teknologi i undervisningen. Fejlen understreger også risikoen ved hurtigt at acceptere påstande om AI’s potentiale uden tilstrækkelig dokumentation.

Hvad betyder dette for fremtidig forskning?

Tilbagetrækningen af undersøgelsen er et varsel til forskere og medier om at være ekstra omhyggelige med at verificere resultater, før de deles bredt. Det viser også, hvor hurtigt fejlagtige påstande kan sprede sig på sociale medier og påvirke den offentlige debat om AI i uddannelse.