A revista Nature anunciou a retratação de um estudo que sugeria que o ChatGPT melhorava o desempenho, a percepção e o pensamento crítico de estudantes. O artigo, intitulado "The effect of ChatGPT on students’ learning performance, learning perception, and higher-order thinking: insights from a meta-analysis", foi publicado em maio de 2025 por pesquisadores da Hangzhou Normal University, na China.
A meta-análise combinava dados de 51 estudos publicados entre novembro de 2022 e fevereiro de 2025, alegando que o uso do ChatGPT tinha um impacto positivo significativo no aprendizado. No entanto, a Nature informou que a retratação ocorreu devido a "desvios na meta-análise" que comprometeram a validade dos resultados.
"O editor decidiu retratar este artigo devido a preocupações com discrepâncias na meta-análise. Esses problemas minam a confiança na validade da análise e das conclusões resultantes", declarou a revista em nota. Os autores não responderam aos questionamentos sobre a retratação.
O estudo ganhou rápida atenção nas redes sociais, especialmente no LinkedIn, após sua publicação. Em menos de um mês, foi acessado quase 400 mil vezes e teve um Altmetric de 365, impulsionado por compartilhamentos de figuras influentes que defendiam o uso de IA na educação.
Segundo Ben Williamson, professor sênior em educação digital da Universidade de Edimburgo, o artigo foi amplamente disseminado como uma das primeiras evidências concretas dos benefícios do ChatGPT no aprendizado. No entanto, especialistas já haviam alertado sobre problemas metodológicos.
Um estudo de 2025 publicado no European Journal of Education Policy and Practice destacou que a abordagem usada por Wang e Fan é frequentemente falha. O artigo, intitulado "What counts as evidence in AI ED: Towards Science-for-Policy 3.0", escrito por Ilkka Tuomi, argumenta que meta-análises que incluem estudos de qualidade variável não devem ser usadas para fundamentar políticas educacionais.
"Embora pareça metodologicamente rigoroso, a heterogeneidade dos estudos analisados torna os resultados quantitativos da meta-análise de Wang e Fan sem sentido", afirmou Tuomi, referindo-se a problemas semelhantes em outros estudos virais sobre o tema.
Artigos relacionados
ArXiv proíbe autores por um ano após envio de trabalhos gerados por IA
ArXiv, the open-access repository of preprint academic research, will ban authors of papers for a year if they submit obviously AI-generated work. Lat...
Por trás da notícia: novas músicas, polêmicas e bastidores da semana
This is Behind the Blog, where we share our behind-the-scenes thoughts about how a few of our top stories of the week came together. This week, we dis...
Clínica Mayo adota IA para gravar interações em pronto-socorros sem consentimento explícito
Mayo Clinic, the massive U.S. hospital network, is using what it describes as “Ambient Listening” to record patient interactions with nurses, includin...
AI avançada é classificada como 'guerra revolucionária' pelo Pentágono
Advanced artificial intelligence models will “fundamentally change warfare as we know it,” a top cyber official at the Defense Department said Thursda...
Segurança de identidades se torna prioridade máxima com a IA, alerta autoridade da Casa Branca
As AI becomes more integrated into federal IT (and attacker toolsets) government agencies will need to focus their resources on regulating and monitor...
IA supera todas as expectativas em testes de cibersegurança autônoma, revelam pesquisadores
Two of the most advanced artificial intelligence models — Anthropic’s Claude Mythos Preview and OpenAI’s GPT-5.5 — have significantly surpassed the al...
Comitê de Segurança Interna dos EUA investiga modelo de IA Mythos da Anthropic e riscos cibernéticos
The House Homeland Security Committee is digging into Anthropic’s AI model Mythos in a series of briefings and hearings, as questions proliferate on w...
IA Generativa: A Nova Fronteira da Fraude e do Roubo de Identidade
Today’s enterprise executives are navigating a complex landscape of AI-driven challenges, but none is more urgent than the rapid escalation of AI-gene...