Vitenskapelig studie om ChatGPT i undervisning trukket tilbake på grunn av feil

Studie med påstander om ChatGPTs læringsgevinster trukket tilbake

En studie som hevdet at OpenAI sin ChatGPT kan forbedre elevers læring er nylig trukket tilbake av utgiveren Springer Nature. Studien ble publisert for nesten ett år siden, men ble nå fjernet på grunn av alvorlige feil i analysen og manglende tillit til konklusjonene.

Før tilbaketrekningen ble studien sitert hundrevis av ganger og spredt bredt på sosiale medier. Mange så på den som en av de første pålitelige kildene som dokumenterte ChatGPTs positive effekt på læring.

Eksperter reagerer på tilbaketrekningen

Ben Williamson, seniorlektor ved Senter for forskning i digital utdanning ved Universitetet i Edinburgh, kommenterte saken til Ars Technica:

«Forfatterne av studien gjorde svært oppsiktsvekkende påstander om ChatGPTs positive innvirkning på læringsresultater. Mange tok den for god fisk på sosiale medier og så på den som en av de første solide bevisene for at generativ AI, inkludert ChatGPT, kommer elevene til gode.»

Studien forsøkte å måle effekten av ChatGPT på elevers læringsprestasjoner, oppfatning av læring og evne til høyere ordens tenkning. Forskerne gjennomførte en metaanalyse av 51 tidligere studier, der de sammenlignet grupper som brukte ChatGPT i undervisningen med kontrollgrupper som ikke gjorde det.

Alvorlige svakheter i analysen

Springer Nature, utgiveren av det aktuelle tidsskriftet, begrunnet tilbaketrekningen med «uoverensstemmelser i analysen» og mangel på tillit til resultatene. Studien har dermed ikke lenger noen vitenskapelig tyngde.

Tilbaketrekningen av studien understreker viktigheten av kritisk gransking av forskning, spesielt når det gjelder nye teknologier som generativ AI. Mange eksperter advarer nå mot å trekke forhastede konklusjoner basert på enkeltstudier.

Hva betyr dette for fremtidig forskning?

Eksperter peker på at tilbaketrekningen av en studie med så stor oppmerksomhet viser hvor viktig det er med streng kvalitetskontroll i forskningsmiljøet. Dette gjelder særlig innen feltet kunstig intelligens og utdanning, der nye funn raskt kan bli spredt og misforstått.

Forskere oppfordrer nå til større åpenhet og grundighet i fremtidige studier for å unngå lignende situasjoner.