כתב העת היוקרתי Nature הודיע על הסרתו של מחקר שפורסם במאי 2024, אשר טען כי שימוש ב-ChatGPT משפר באופן משמעותי את ביצועי הלמידה, התפיסה העצמית וחשיבה ברמה גבוהה בקרב תלמידים.
המחקר, שנערך על ידי החוקרים Jin Wang ו-Wenxiang Fan מאוניברסיטת הנגג'ואו הסינית, התבסס על ניתוח מטא-אנליזה שכלל 51 מחקרים שפורסמו בין נובמבר 2022 לפברואר 2025. לטענת החוקרים, נמצא כי ל-ChatGPT השפעה חיובית גדולה או מתונה על היבטים אלו של הלמידה.
עם זאת, Nature הודיעה על ההסרה בעקבות חששות לגבי אי-התאמות בניתוח הנתונים, אשר ערערו את אמינות המסקנות. בהודעת ההסרה נכתב: "העורך החליט להסיר את המאמר בעקבות חששות לגבי אי-התאמות בניתוח המטא-אנליזה. בעיות אלו פוגעות באמינות הניתוח ומסקנותיו. המחברים לא הגיבו לבקשות לתגובה בנושא."
החוקרים לא הגיבו לבקשות לתגובה מצד התקשורת.
תגובת הקהילה המדעית
פרופ' Ben Williamson, מומחה לחינוך דיגיטלי מאוניברסיטת אדינבורו, ציין כי המחקר זכה לתשומת לב רבה ברשתות החברתיות, בעיקר ב-LinkedIn, לאחר פרסומו במאי 2025. תוך חודש בלבד, הוא נצפה כמעט 400,000 פעמים וזכה לציון גבוה במדד Altmetric בעקבות שיתופים נרחבים בפלטפורמות כמו X ו-Bluesky. חלק מהשיתופים הגיעו מידוענים בתחום, אשר הציגו את המחקר כהוכחה לכך ש-AI תורם לחינוך.
ביקורת על מתודולוגיית המחקר
במקביל, מחקר שפורסם ב-2025 בכתב העת European Journal of Education Policy and Practice הצביע על ליקויים מתודולוגיים בניתוחים מסוג זה. המחקר, שנכתב על ידי Ilkka Tuomi ונושא הכותרת "מה נחשב כראיה בחינוך מבוסס AI: לקראת מדע למדיניות 3.0", קבע כי:
"הראיות האמפיריות הקיימות לגבי AI בחינוך מצביעות על השפעות חיוביות מסוימות, אך בחינה מעמיקה מגלה בעיות מתודולוגיות ומושגיות. מסקנה זו מובילה למסקנה כי אין להשתמש בראיות אלו להנחיית מדיניות או פרקטיקה בחינוך."
לטענת Tuomi, אחת הבעיות העיקריות היא כי ניתוחים מסוג זה כוללים מחקרים שעברו ביקורת עמיתים, אך בחינה מעמיקה יותר מגלה כי איכותם משתנה ואינה מוכיחה כי AI משפר את תוצאות הלמידה. הוא הוסיף: "למרות נראות המתודולוגיה ומדומה הריגורוזיות שלה, ההטרוגניות של המחקרים שנכללו הופכת את התוצאות הכמותיות של ניתוח המטא-אנליזה לחסרות משמעות."
הבעיות המתודולוגיות הללו אינן ייחודיות למחקר של Wang ו-Fan. מחקר ויראלי נוסף, אשר הוצג אף הוא כהוכחה לכך ש-ChatGPT משפר את הלמידה, סבל מאותן בעיות.