2024-06-29 | 남윤정 기자

让ChatGPT做“大学试卷”…结果令人“惊愕”

本页标题和正文均由AI机器翻译,未经人工审校。准确内容请以韩文原文为准。

一项研究结果显示,由生成式人工智能(AI)ChatGPT-4生成的答卷,在实际大学考试中获得的分数高于学生亲自撰写并提交的答卷。其中94%的答卷未被评卷人发现。有观点指出,随着AI工具使用日益普及,教育与评价体系需要制定应对措施。

27日(当地时间),英国雷丁大学心理与临床语言科学学院彼得·斯卡夫教授团队在科学期刊《PLOS ONE》上表示,在该校实际本科考试中提交AI撰写答卷的严格盲测实验中得到了这一结果。

研究团队称:“这项研究是迄今为止考察人类教育者能否辨别AI生成内容的实验中规模最大、最有力的盲测实验”,“该结果表明,AI在大学考试中也通过了区分计算机(人工智能)与人类的图灵测试”。

研究团队在本研究中,以33名虚构学生的名义,向心理学学士学位所需的5门本科考试(3门简答题、2门论述题)提交了100%由ChatGPT-4撰写的答卷。评卷人在不知晓该研究的情况下进行了实验。

结果显示,AI撰写答卷中有94%未被评卷人发现,且平均得分高于真实学生的答卷。

随机选取AI撰写答卷与真实学生答卷进行比较时,AI答卷得分更高的概率达83.4%。

此外,真实学生得分高于AI分数中位数的比例在4门考试中仅为4.35%~17.63%,只有1门论述题考试中有57.14%的真实学生分数超过AI分数中位数。

研究团队表示:“该结果暗示学生可能利用AI作弊,并且他们有可能取得比其他学生更好的成绩”,“研究过程中也考虑到相当一部分真实学生可能通过AI生成的提交物作弊”。

同时强调:“这显示出AI可能对教育评价产生何种影响,非常令人担忧”,“全球教育部门应针对AI发展制定新的政策与指南,为解决问题付出更多努力”。

阅读韩文原文