Um estudo que defendia que o ChatGPT da OpenAI poderia melhorar o aprendizado dos estudantes foi retratado pela Springer Nature quase um ano após sua publicação. A editora alegou "discrepâncias" na análise e falta de confiança nas conclusões, embora o artigo já tivesse sido amplamente citado e compartilhado nas redes sociais.
"Os autores do estudo fizeram afirmações muito chamativas sobre os benefícios do ChatGPT no desempenho e na percepção de aprendizado", declarou Ben Williamson, professor sênior do Centre for Research in Digital Education e do Edinburgh Futures Institute da Universidade de Edimburgo, em entrevista à Ars. "Muitos trataram o estudo como uma das primeiras evidências sólidas de que o ChatGPT, e a IA generativa em geral, beneficiam os estudantes."
O artigo retratado buscava quantificar "o impacto do ChatGPT no desempenho, na percepção de aprendizado e no pensamento de ordem superior dos estudantes" por meio de uma meta-análise de 51 estudos anteriores. A pesquisa calculou o tamanho do efeito entre grupos experimentais que usaram o ChatGPT na educação e grupos de controle que não utilizaram a ferramenta.