美国《大众科学》月刊网站9月11日报道了一篇题为《使用ChatGPT作为学习助手的孩子考试成绩更差》的文章,记者是吉尔·巴谢。全文摘编如下:
人工智能真的有助于学生学习吗?最近在一所高中开展的实验或许能提供一些启发。
据报道,美国宾夕法尼亚大学的研究人员对土耳其高中生开展的调查发现,有条件使用聊天生成预训练转换器(ChatGPT)做数学练习题的学生在数学考试中的表现不如未使用ChatGPT的学生。前者在做练习时多解出48%的题目,但在测试中得分比后者低17%。
第三组学生有条件使用微调版ChatGPT,它的作用更像一位助教。这个聊天机器人按照程序设计给学生提示,但不会直接泄露答案。使用它的学生做练习时表现明显更好,正确解题量比不借助高科技辅助手段的学生高出127%。但在之后的一次考试中,这些由人工智能辅导的学生却并不占优。靠自己做练习的学生与他们成绩相当。
这些研究人员在题为《生成式人工智能会影响学习》的论文中向家长和教育工作者表明,目前这些可以自由使用的人工智能聊天机器人可能“严重有碍学习”。即使是专门用来模仿助教的微调版ChatGPT也未必能起到帮助作用。
报道称,ChatGPT会犯错也可能是一个原因。聊天机器人只能正确回答一半的数学问题。它的计算在8%的情况下是错误的。更糟糕的是,它采取的按步骤解决问题的方法在42%的情况下是错误的。