
教授用ChatGPT查重结果全班学生0分
离了个大谱!
最近,一位美国教授为了解决学生用AI作弊的问题,决定用「魔法」打败「魔法」。
但完全没搞懂原理的他,在「查重」时竟然用的是ChatGPT。
于是,同学们辛辛苦苦码出的毕业论文,通通被胡说八道的ChatGPT判定为「抄袭」。
而教授不仅据此挂掉了半个班的人,学校也拒发毕业证……
甚至,这件事直接火到了大洋彼岸,一度登上了微博的热搜。
教授:被ChatGPT认领的,都得0分
前段时间,在得克萨斯农工大学(Texas A&M),发生了这样一件令人哭笑不得的事。
为了检测学生提交的论文是否作弊,一位名叫Jared Mumm的教授把他们的论文提交给了ChatGPT。
他对学生们说:我会把你们的论文复制粘贴到ChatGPT中,它会告诉我,你们的论文是不是它生成的。
「我会在两个不同的时间段里,把每个人的最后三篇论文放进去,如果这两次它们都被ChatGTP认领了,我就会给你0分。」
显然,没有任何计算机相关背景知识的Mumm教授,对ChatGPT的原理一窍不通。
实际上,ChatGPT并不能识别由AI创建的内容,即使是它自己写的都不行。
甚至,他连ChatGPT都没拼对——直接写成了「Chat GPT」以及「chat GPT」。
结果,全班有一多半人的论文被ChatGPT不负责任地「认领」,因而挂了这一科。
更倒霉的是,大多数已毕业学生的文凭,因此直接被学校拒发了。
当然,Mumm教授也不是毫不留情,他为全班同学提供了重做作业的机会。
如何证明自己没用ChatGPT?
收到上面这封邮件后,几名学生写信给Mumm力证自己的清白。他们提供了带有时间戳的Google Docs,来证明自己并没有使用ChatGPT。
但Mumm教授直接无视了这些电子邮件,只在几个学生的评分软件中留下了这样的回应——我不给AI生成的「shit」评分。
不过,还是有学生「平反」了,据说,已经有一名学生被「无罪释放」,并且得到了Mumm的道歉。
然而,让情况更复杂的事,有两名学生「挺身而出」,承认自己的确在本学期使用过ChatGPT。
这一下子就让其他没有用ChatGPT写论文的学生,更难自证清白了……
对此,得克萨斯农工大学商学院表示正在调查这一事件,但并没有学生不及格,也没有人因为这个问题被延毕。
学校表示,Mum教授正在一对一地与学生谈话,了解他们写作业的过程中是否使用了AI,使用到了什么程度。个别学生的文凭将被扣留,直到调查完成。
而学生们表示,自己并没有获得文凭。
目前,事件还在调查中。
用ChatGPT检测ChatGPT?
那么问题来了,ChatGPT能证明一篇文章是不是自己写的吗?
对此,我们基于教授这封邮件的内容,问了问ChatGPT的观点:
ChatGPT一上来就表示,自己并没有能力验证内容的原创性,以及是不是由AI生成的。
「这位老师似乎误解了像我这样的AI是如何工作的。虽然AI可以根据提示生成文本,但它不能确定另一篇文本是否由人工智能生成。」
话虽如此,但这并不能拦住爱整活的网友。
他们来了一出「以其人之道还治其人之身」,在线教Mumm教授做人。
首先,ChatGPT表示,教授写的这封邮件,正是出自自己之手。
紧接着,网友又复刻了Mumm教授的做法——
拿一段看起来像是某篇论文的节选,来问ChatGPT是不是它写的。
这次,ChatGPT虽然没说是自己写的,但基本上确定内容就是来自AI。
其中,有几个特征与Al生成的内容一致:
1. 文本是连贯的,遵循一个清晰的结构,从一般到具体。
2. 准确地引用了来源和数字数据。
3. 正确地使用了术语,这是典型的Al模型的特点。比如GPT-4,就是在包括科学文献在内的各种文本中训练出来的。
那么实际上,这段内容的出处是哪里呢?
有意思的地方来了,没想到竟然是Mumm教授自己写的博士论文!
AI检测器并不灵?
既然ChatGPT无法检验一段内容是不是AI生成的,那什么可以呢?
自然是为此专门诞生的「AI检测器」,号称是用魔法打败魔法。
众多AI检测器中,最出名的一个便是由普林斯顿华人本科生Edward Tian创建的GPTZero——它不仅免费,而且效果拔群。
只需把文字复制粘贴进去,GPTZero就可以明确地指出一段文字中,哪段是AI生成的,哪段是人类写的。
原理上,GPTZero主要靠「困惑度」(文本的随机性)和「突发性」(困惑度的变化)作为指标进行判断。
在每次测试中,GPTZero还会挑选出困惑度最高的那个句子,也就是最像人话的句子。
但这个方法其实并不完全可靠,虽然GPTZero声称产品的假阳性率
在实测中,有人曾把美国宪法输入GPTZero,结果被判定是AI写的。
而刚刚那段ChatGPT的回复,GPTZero则认为很可能完全是由人类写的。
这导致的后果就是,不了解其中原理、太固执的老师,就会无意中冤枉很多学生,比如Mumm教授。
所以,如果遇到这种情况,我们该怎么自证清白?
有网友提议,类似「美国宪法实验」,把ChatGPT出现之前的文章丢进AI检测器,看看结果如何。
然而,从逻辑上讲,即使能证明AI检测器确实不靠谱,学生也无法直接证明自己的论文不是由AI生成的。
问一下ChatGPT怎么破,它是这么说的。
「让老师理解AI的工作方式和局限性」,嗯,ChatGPT发现了华点。
目前小编唯一想到的答案是,如果不在教授眼皮底下直接写,那就每次写论文都录屏,或者干脆给教授开直播。
连OpenAI对于自己的官方ChatGPT检测器,也只能保证26%的「真阳性」正确率。
他们还特地发了官方声明给大家打预防针:「我们真的不建议孤立地使用这个工具,因为我们知道它可能出错,使用AI进行任何种类的评估都是如此」。
AI内容检测为何如此困难?
目前市面上已有的检测器已经数不胜数——GPTZero、Turnitin、GPT-2 Output、Writer AI 、Content at Scale AI等等,但准确率都差强人意。
那么,为什么我们想检测一段内容是不是AI生成的,就这么困难?
Turnitin的AI副总裁Eric Wang称,用软件检测AI写作的原理,是基于统计学。从统计学的角度来看,AI与人类的区别在于,它极其稳定地处于平均水平。
「像ChatGPT这样的系统就像是自动补全的高级版本,寻找下一个最可能要写的单词。这实际上就是它为什么读起来如此自然的原因。AI写作是人类写作中最可能的子集。」
Turnitin的检测器便会「识别出书写过于一致的平均情况」。然而,有时人类的写作看起来也会处于平均水平。
在经济学、数学和实验室报告中,学生倾向于遵循固定的写作风格,这意味着他们更有可能被误认为是AI写作。
研究人员从中国的教育论坛上获取了91篇托福作文,又从美国Hewlett基金会的数据集中摘取了88篇美国八年级学生写的作文,输进了7大GPT检测器。
可以看到,美国学生的作文被误判的概率最高才12%,而中国学生的作文,概率基本过半,甚至高达76%。
研究者的结论是,因为非母语者写的东西不地道,复杂度低,容易被错判。
可见,以复杂度来判定作者是人类还是AI,并不合理。
抑或,背后还有其他原因?
对此,英伟达科学家Jim Fan称,检测器在很长一段时间内都是不可靠的。毕竟AI会变得越变越强,并且会以越来越像人类的方式写作。
可以肯定地说,随着时间的推移,这些语言模型的小怪癖会越变越少。
不知这对学生们,会是福音还是噩耗。
一、什么是ChatGPT?
ChatGPT 是 OpenAI 开发的一种可以理解人类语言并进行交流的语言模型。它已经过大量文本数据的训练,可以生成不同的文本类型和代码。
简单来说,ChatGPT 是一个可以像人一样说话和理解的计算机程序。它从书本和文章中学到了很多单词和句子,所以它知道如何把单词组合成句子。它可以完成给定的文本提示、回答问题甚至创建新文本。它可以针对特定目的进行微调,例如回答问题、翻译语言和总结文本。
它可以为你提供问题的答案,但并不总是正确的,因此对信息进行事实核查很重要。虽然 ChatGPT 可能看起来像是学习解决方案的捷径,但请务必记住,它不能取代学习批判性思维和人际互动在教育中的重要性。
ChatGPT 可能会以多种方式影响学生和教师,具体取决于它在教育环境中的实施和应用方式。
二、ChatGPT 将如何使学生受益?
研究:ChatGPT 可以帮助学生快速访问信息并回答广泛主题的问题,使研究和作业分配更快、更高效。
写作建议:帮助学生提高写作能力,更好地表达自己的想法和想法,检查语法和句子结构。
个性化学习:ChatGPT 可以根据学生的熟练程度和学习风格提供量身定制的交互式响应,从而个性化学习体验。
语言学习:ChatGPT可以作为语言学习的工具,帮助学生与AI导师一起练习外语口语和写作。
按需访问教育内容:ChatGPT 可以为学生提供 24/7 全天候访问教育资源和支持,使他们能够在正常上课时间之外继续学习。
三、ChatGPT 将如何对学生产生负面影响?
缺乏人际互动:ChatGPT 可能会减少课堂上人际互动的需求,导致学生缺乏人际关系和支持,这可能不利于学生的社交和情感发展。
减少批判性思维:这可能会导致学生过度依赖技术来获取信息和学习,从而可能阻碍他们批判性思考和自行解决问题的能力。
不准确的信息:ChatGPT 可能无法完全理解学生问题或情况的上下文,导致不准确或无益的回答,这可能会导致混乱的学习过程。
缺乏同理心:ChatGPT 可能无法提供与人类教师或辅导员相同水平的同理心或情感支持。
笼统的回应:ChatGPT 可能无法适应不同的学习方式、文化背景或有特殊需要的学生,这可能导致一刀切的教育方法。
四、ChatGPT 对教师的好处
个性化:ChatGPT 可用于根据每个学生的个人需求和能力为他们创建定制的学习体验。这可以帮助学生保持参与和积极性,并可以提高学业成绩。
效率:ChatGPT 可以自动执行重复性任务,例如评分、提供反馈和创建教育内容。这可以节省教师的时间,让他们能够专注于更重要的任务,例如为学生提供个人支持和指导。
灵活性:ChatGPT 可用于创建各种教育资源,例如交互式教程、学习指南和在线学习测验。这可以让学生更容易地访问他们需要学习的信息,无论他们的位置或日程安排如何。
适应性:ChatGPT 可用于创建自适应学习系统,以适应学生的表现并提供有针对性的支持。这可以帮助学生保持正轨并在学习中取得稳步进步。
辅助功能:ChatGPT 可用于创建残障学生(例如视障或听障学生)可以访问的教育资源。这有助于使教育对所有学生更具包容性和公平性。
五、ChatGPT 对教师的负面影响
失业:由于 ChatGPT 能够自动执行评分、提供反馈和创建教育内容等重复性任务,因此它可能会导致部分教师失业。
对技术的依赖:教师可能会过度依赖 ChatGPT,这可能会限制他们的创造力和开发独特教学方法的能力。它还可能导致对主题的基本概念缺乏理解,这将使得在技术不可用时难以排除故障。
有限的人际互动:ChatGPT 可能会限制师生之间的人际互动,这可能不利于学生的社交和情感发展。教师也可能错过提供个性化反馈和支持的机会,这对学生的成长和成功至关重要。
对该技术的了解有限:教师可能对 ChatGPT 的工作原理及其功能了解有限。这可能导致教师无法充分利用该技术的全部潜力,甚至无法以正确的方式使用它。
创造力有限:过度依赖 ChatGPT 生成的内容可能会限制教师开发自己的教材的创造力。这也可能使他们不太愿意开发自己的评估方法或提供反馈的方式。
六、ChatGPT 在教育领域的实际应用
虚拟辅导:ChatGPT 可用于随时随地为学生提供虚拟的一对一辅导。虚拟导师可以使用自然语言处理来理解学生的问题并提供个性化的指导。这对于参加传统课程有困难的学生或学习进度不同的学生尤其有益。
自定进度学习:ChatGPT 可用于创建学生可以随时随地访问的交互式教程、测验和学习指南。这使学生可以按照自己的节奏学习,从而获得更好的学习成果。
语言学习:ChatGPT 可针对语言学习进行微调,可用于创建交互式语言学习资源,例如虚拟语言辅导、语言测验和语言翻译工具。
自动评估:ChatGPT 可用于创建自动评估。这些评估可以为学生提供即时反馈,使他们能够确定需要改进的地方并相应地调整他们的学习计划。
个性化学习计划:ChatGPT 可用于根据学生的个人需求和能力为他们创建个性化学习计划。学生可以随时随地访问这些学习计划。
生成学习笔记:ChatGPT可用于总结学习资料,如教科书章节、文章或研究论文,使学生更容易理解和保留信息。
问答:ChatGPT 可以回答学生与特定学科或主题相关的问题,提供快速准确的答复。
基于游戏的学习:ChatGPT 可用于创建教育游戏,学生可以玩这些游戏,以有趣和互动的方式学习新概念和技能。
如上列举,ChatGPT 有可能以积极和消极的方式影响教育。它可用于个性化学习内容、自动执行重复性任务,并为学生提供按需访问教育资源。同时重要的是,还要考虑 ChatGPT 的潜在缺点,例如缺乏人际互动、批判性思维减少以及共享不准确信息的风险。
与任何新技术一样,以最大限度地发挥其优势同时最大限度地减少其缺点的方式使用 ChatGPT 非常重要。教师和学生须经过培训才能有效地使用该技术。最终目标应该是增强学生的教育体验,同时不取代人际互动和批判性思维在学习过程中的重要作用。
网友评论:
一口一个分度圆 :我就不一样,全部自己写的初稿。导师评价:全文缺乏说服力
不再壹 :魔法打败魔法
熟人与陌生 :电脑以超过人脑,这是个可怕的事实了。
幸好躲得远 :你用AI写,老师用AI查,最后都变成AI的奴隶了
你们的甘蔗哥哥 :我老板说他朋友公司因为Gpt的出现,裁掉了80%的人
杨澄之 :大学作文老师说我查重率太低,要我抄点,但是真没几个人写这玩意儿纯属我胡诌啊
取个好名字好好好难啊 :GPT是个好软件 也不是个好软件
闲时冲个浪 :我导师给我的评价是写得跟红楼梦一样,满纸荒唐言。