原文:Influential study touting ChatGPT in education retracted over red flags
一项声称 OpenAI 的 ChatGPT 可以对学生学习产生积极影响的研究在发表近一年后被撤回。期刊出版商施普林格·自然 (Springer Nature) 引用了分析中的“差异”以及对结论缺乏信心,但在此之前该论文已获得数百次引用并在社交媒体上流传。
苏格兰爱丁堡大学数字教育研究中心和爱丁堡未来研究所的高级讲师 Ben Williamson 在给 Ars 的电子邮件中表示:“该论文的作者就 ChatGPT 对学习成果的好处提出了一些非常引人注目的主张。” “社交媒体上的许多人将其视为第一批硬性、黄金标准的证据之一,表明 ChatGPT 以及更广泛的生成式人工智能有益于学习者。”
这篇被撤回的论文试图通过分析 51 项之前的研究结果来量化“ChatGPT 对学生学习表现、学习感知和高阶思维的影响”。其荟萃分析计算了在教育中使用 ChatGPT 的各项研究的实验组与不使用 AI 聊天机器人的对照组之间的效应大小。
据撰写该论文的研究人员称,该分析据称表明“ChatGPT 对提高学习成绩具有巨大的积极影响”,同时“对增强学习感知具有适度的积极影响”和“培养高阶思维”。现已撤回的结果首次发表在 Springer Nature 于 2025 年 5 月 6 日出版的《人文与社会科学通讯》杂志上。
威廉姆森告诉 Ars:“在某些情况下,它似乎综合了质量非常差的研究,或者将由于方法、人群和样本截然不同而根本无法准确比较的研究结果混合在一起。” “这看起来确实像是一篇从一开始就不应该发表的论文。”
威廉姆森还质疑该论文发表的时间
