네이처誌, ChatGPT 교육 효과 논문 철회

국제학술지 네이처(Nature)가 지난해 발표된 ChatGPT의 교육 효과에 대한 메타분석 논문을 철회했다고 2025년 6월 발표했다. 해당 논문은 중국 항저우사범대학의 왕진(Jin Wang)과 판원샹(Wenxiang Fan) 연구진이 발표한 것으로, ChatGPT가 학생들의 학습 성과, 학습 인식, 고등 사고력에 긍정적인 영향을 미친다는 결론을 제시했다.

메타분석 오류로 인한 철회

네이처誌는 성명에서 "메타분석 과정에서 자료 불일치 등 문제가 발견되어 분석 결과와 결론의 신뢰성을 확보할 수 없게 되었다"며 "저자들이 철회 통보에 대한 답변을 보내지 않았다"고 밝혔다. 연구진은 아직 공식 입장을 밝히지 않고 있다.

논문 주목받았으나…

해당 논문은 2025년 5월 발표 직후 SNS와 학술 커뮤니티에서 주목을 받았다. 특히 링크드인에서 AI 교육 도입을 지지하는 인사들에 의해 빠르게 공유되면서 1개월 만에 온라인 조회수 40만 회를 기록했고, 알트메트릭 점수 365점을 받았다. 그러나 네이처誌의 철회 결정으로 논문의 신뢰성이 흔들리게 됐다.

메타분석 방법론의 한계 지적

유럽 교육정책 연구지 European Journal of Education Policy and Practice에 실린 2025년 연구에 따르면, 왕진과 판원샹 연구진의 메타분석 방법은 여러 한계를 지닌 것으로 나타났다. 일리카 투오미(Ilkka Tuomi) 연구원은 "AI 교육 효과에 대한 기존 실증 연구는 일부 긍정적 영향을 시사하지만, 방법론적·개념적 문제로 인해 정책이나 실천 가이드로 활용하기 어렵다"고 지적했다.

특히 메타분석에서 사용된 개별 연구들의 질적 차이가 크고, AI가 학습 성과를 실제로 향상시킨다는 증거가 부족하다는 것이다. 투오미는 "메타분석의 겉보기 엄격함에도 불구하고 연구 간 이질성으로 인해 결과의 신뢰성이 떨어진다"고 강조했다.

AI 교육 효과 논쟁 지속

이번 철회는 AI가 교육 현장에서의 효과를 입증하는 데 대한 논쟁을 다시 불러일으켰다. 일부 연구자들은 AI 도구가 학습 동기 부여나 개인 맞춤형 학습에 도움이 될 수 있다고 주장하는 반면, 다른 연구자들은 메타분석의 한계로 인해 아직 명확한 결론을 내리기 어렵다고 지적한다. 네이처誌의 철회는 AI 교육 정책 수립 시 과학적 근거의 중요성을 강조하는 계기가 될 전망이다.

출처: 404 Media