Tidsskriftet Nature har trukket en videnskabelig artikel tilbage, der hævdede, at kunstig intelligens, herunder ChatGPT, havde en positiv effekt på elevers læring og evne til kritisk tænkning. Artiklen, der blev offentliggjort i maj 2025, var skrevet af forskerne Jin Wang og Wenxiang Fan fra Hangzhou Normal University i Kina.

Artiklen var en metaanalyse, der samlede data fra 51 forskellige studier publiceret mellem november 2022 og februar 2025. Forfatterne konkluderede, at ChatGPT havde en stor eller moderat positiv indvirkning på elevers læringspræstationer, opfattelse af læring og evne til højere ordens tænkning.

Hvorfor blev artiklen trukket tilbage?

Nature meddelte i en tilbagekaldelsesmeddelelse, at artiklen blev trukket tilbage på grund af alvorlige metodiske uoverensstemmelser i metaanalysen. Disse problemer underminerer troværdigheden af analysen og dens konklusioner. Forskerne har endnu ikke reageret på henvendelser vedrørende tilbagekaldelsen.

Ifølge Ben Williamson, lektor i digital uddannelse ved University of Edinburgh, blev artiklen hurtigt delt og citeret på sociale medier, især på LinkedIn. Den blev set næsten 400.000 gange inden for en måned og havde en Altmetric-score på 365, hvilket indikerer stor opmærksomhed. Indflydelsesrige personer på sociale medier bidrog til spredningen af artiklen som bevis for, at AI forbedrer uddannelsen.

Kritik af metodens pålidelighed

En undersøgelse fra 2025, publiceret i European Journal of Education Policy and Practice, påpegede allerede metodiske problemer i Wang og Fans analyse. Ifølge forskeren Ilkka Tuomi er mange metaanalyser inden for AI i uddannelse baseret på studier af varierende kvalitet, hvor data ikke nødvendigvis understøtter påstande om forbedret læring.

"Eksisterende empiriske beviser for AI i uddannelse tyder på nogle positive effekter, men en nærmere undersøgelse afslører metodiske og konceptuelle problemer. Disse problemer gør, at de eksisterende beviser ikke bør anvendes til at udforme politik eller praksis," skrev Tuomi i sin analyse.

Tuomi påpeger, at mange metaanalyser inkluderer studier, der ikke lever op til strenge videnskabelige standarder. Selvom analysen kan fremstå metodisk solid, er heterogeniteten i de undersøgte studier så stor, at resultaterne bliver meningsløse.

Artiklen fra Wang og Fan er blot ét eksempel på en videnskabelig undersøgelse, der hurtigt blev spredt som bevis for AI’s positive indvirkning på uddannelse. Kritikere advarer imidlertid om, at sådanne konklusioner ofte bygger på upræcise eller uprøvede data.