2023年，纽约大学的研究人员在Nature发表题为Perception, performance, and detectability of conversational artificial intelligence across 32 university courses的论文。研究人员发现，在9个专业中，ChatGPT的课堂表现超过普通学生。教授认为，在学校中使用ChatGPT，能让自己更好地教学。但是对于让学生使用ChatGPT学习，完成作业，却非常不支持，会将使用ChatGPT的学生视为作弊或者抄袭。
研究人员通过将ChatGPT与来自8个学科的32门大学水平课程的学生的表现进行比较，来研究ChatGPT作为抄袭工具的潜力。此外，研究人员评估了专门用于检测ChatGPT生成文本的现有算法，并评估了可用于逃避此类算法的混淆攻击的有效性。为了更好地了解学生和教育工作者对ChatGPT的效用以及使用ChatGPT所产生的道德和规范问题的看法，研究人员调查了来自五个国家的参与者：巴西、印度、日本、英国和美国。此外，研究人员对作者所在机构的151名本科生和60名教授进行了更广泛的调查，以探索不同学科对ChatGPT的看法差异。
研究人员发现，ChatGPT的表现与32门课程中的9门课程的学生相当，甚至更好。此外，研究人员发现当前的检测算法倾向于将人类答案错误地分类为人工智能生成的答案，并将ChatGPT答案错误地分类为人工生成的答案。更糟糕的是，混淆攻击使这些算法无效，无法检测95%的ChatGPT答案。最后，在学生和教育工作者之间似乎都有一个共识，即他们打算在他们的作业中使用ChatGPT，而将其视为剽窃。这两者之间的内在冲突给教育机构提出了紧迫的挑战，要求他们制定与生成式人工智能相关的适当的学术诚信政策，特别是与ChatGPT相关的政策。
研究人员的研究结果提供了及时的见解，可以指导围绕生成式人工智能时代教育改革的政策讨论。
本文内容转载自“新智元”微信公众号。
原文链接: https://mp.weixin.qq.com/s/Zi3opb60g4Bo5LmGNWWrvQ
