即将到来的人工智能革命中,短篇物理论文的消亡
摘要:AI生成的物理学短文在几秒钟内就可以产生原创的、高质量的全文(300字)。这些技术,如ChatGPT和davinci-003,对任何拥有互联网连接的人都是免费的。在这项工作中,我们提供了AI生成的短文的证据,这些短文在认证的、现有的大学物理模块的文章写作评估中获得了一等成绩。评估要求学生回答五个开放性问题,每个问题以一个300字的短文回答。我们生成了五十个AI答案,创建了十个提交作品,由五个独立的评分者进行独立评分。AI生成的提交作品的平均分数为71±2%,与当前模块的平均分数71±5%非常一致。一个典型的AI提交作品因此很可能被授予一等荣誉,这是英国大学最高的分类。文本相似性检测软件返回的抄袭分数在2±1%(Grammarly)和7±2%(TurnitIn)之间。我们认为这些结果表明,当前的AI语言模型对物理学课程中作为评估方法的短文的准确性构成了重大威胁。
作者:Will Yeadon, Oto-Obong Inyang, Arin Mizouri, Alex Peach, Craig Testrow
论文ID:2212.11661
分类:Physics Education
分类简称:physics.ed-ph
提交时间:2023-04-19