ChatGPT勉强通过了法律与商业研究生考试
来源:阿白律师网 时间:2023-01-28
IT之家 1 月 27 日消息,由于很多人都在担心 OpenAI 的 ChatGPT 会帮助学生在考试中作弊,研究人员不得不进行了更多机器测试。
在一项最新的研究中,明尼苏达大学的法学教授让 ChatGPT 尝试了一下他们学校四门课程的研究生考试题,最终 AI 飘过了所有考试,平均成绩为 C+。
除此之外,在另一篇论文中,沃顿商学院教授 Christian Terwiesch 发现 ChatGPT 以 B- 到 B 的成绩通过了该校商业管理考试。
不过就结果来看,人工智能的表现并不一致。明尼苏达大学的研究小组指出,ChatGPT 擅长解决“基本法律规则”和总结理论,但在试图确定与案件相关的问题方面却表现不佳。
沃顿商学院 Terwiesch 指出,它在处理简单的操作管理和流程分析问题时“令人惊讶”,但无法处理高级流程问题,甚至会在六年级的数学问题上犯错。
也就是说,虽然 AI 勉强可以通过研究生考试,但还有相当大的改进空间。
明尼苏达大学的教授们表示,他们并没有针对特定的课程或问题进行调整,他们认为学生可以通过定制来获得更好的结果;而沃顿商学院教授则表示,AI 善于根据人类的指导改变答案,虽然 ChatGPT 本身可能无法在考试或论文中取得好成绩,但作弊者稍微用点心就可以让系统生成更加标准的答案。
有 AI 反对者表示,学校应该限制这种技术的使用,以防止基于 ChatGPT 的作弊行为。他们还建议更换题库以阻止人工智能的使用或提高对于 AI 的挑战。明尼苏达大学则表示,学生仍然需要学习“基本技能”,而不是依靠机器人寻求帮助。
Terwiesch 则认为,这项技术最终可以节省可以花在学生身上的时间,不知道IT之家的各位如何看待的呢?