如何在在线考试中阻止 ChatGPT 作弊
没有任何单一工具能够阻止AI辅助作弊。有效的做法是结合题目设计、诚信信号和后续追问,使作弊变得困难且得不偿失。
首先,哪些方法行不通
看似诱人的解决方案是AI文本检测器:粘贴一篇文章,得到一个百分比。问题在于,这些工具给出的是概率,而不是证据。它们会误判人类写作,尤其是简短回答和非母语者的文本,而且简单的改写就能骗过它们。OpenAI于2023年撤回了自家的AI文本分类器,因为其准确率过低。仅凭检测器评分指控学生既不公平,也难以站得住脚。
仅禁止设备还不够。在线考试中,聊天机器人可能只隔着一个标签页。而网络摄像头本身无法看到另一个窗口里的内容。
1. 编写聊天机器人难以应对的题目
题目设计是最有效、成本最低的防范手段。聊天机器人非常擅长回答通用的教科书式问题,但在处理与特定情境相关的问题时则弱得多。
结合您自己的课程提问
引用您发放的讨论材料、实验、本地案例或数据集。聊天机器人了解教科书,但不了解您的课堂上周二发生了什么。
考察过程,而不仅仅是答案
要求学生展示步骤、解释选择理由,或评析有缺陷的解法。使用评分标准来评判其推理过程。
使用图像、图表和数据
基于您制作的图表、照片或表格设计的问题,更难被快速粘贴到聊天机器人中。
让问题贴近个人
要求学生将概念与自己的经历、项目或早先的作品联系起来。
保持简短并限时
合理的时间限制几乎没有空间让学生复制、粘贴、提示和改写。
要求提交音频或视频
用学生本人声音作答的口头回答,比打字写成的段落更难被外包。
2. 观察答案是如何写成的
真实的答案是逐字输入、停顿、修改和重新措辞的。复制而来的答案通常会以一两次大段粘贴的形式出现。诚信工具可以在考试中阻止粘贴、在粘贴发生时进行记录,并标记那些输入模式更像是誊抄而非写作的答案。切换标签页和退出全屏会提供背景信息:在一篇完美段落出现之前,学生恰好离开考试两分钟,这值得留意。
这些只是信号,而非证据。一些学生出于正当理由会在文本编辑器中写作后再粘贴。应将标记视为沟通的理由,而非定论。
3. 追问一个问题
最古老的诚信检验方式是口试:解释你写了什么。它之所以有效,是因为即时伪装理解是很困难的。教师很少有时间为每位学生进行口试,但人工智能可以就学生自己的答案提出一个简短的口头问题,并对回答进行评分。写了文章的学生能轻松作答,而粘贴文章的学生通常无法回答。
4. 在全班范围内比对答案
使用相同聊天机器人提示词或互相分享答案的学生,提交的作业往往惊人地相似。相似度报告会列出异常的配对,几秒钟内就能让这一点一目了然,无需逐篇并排阅读每篇文章。
5. 在风险足够高时使用摄像头监考
对于期末考试或资格认证,摄像头检查能有效威慑学生使用手机、笔记和代考人员。请选择尊重隐私的方案:在设备端分析视频,仅上传被标记的片段,并由人工做出最终决定。我们在此说明其运作方式: 无间谍软件的AI监考:设备端监考如何运作
6. 明确规则
许多学生并不确定什么是允许的。请在考试说明中直白地说明:本次测试是否允许使用人工智能工具、允许哪些工具,以及违规将如何处理。当允许使用人工智能辅助时,请要求学生描述他们是如何使用的。清晰的规则比任何检测工具都更能预防问题。
FormRead Online 如何提供帮助
- 从轻度到严格的诚信等级:全屏、标签页切换和粘贴检查,以及在需要时进行的设备端摄像头检查。
- 针对开放式答案的粘贴突发和输入模式标记。
- 在论文之后进行的AI口头追问,依据您的评分标准评分。
- 串通检测报告,标出异常相似的答案。
- 音频和视频答案经AI转录并评分。
- 题库、题目乱序和时间限制,确保没有两名学生看到相同的试卷。
- 可选择将同一份试卷打印在纸上,并用手机进行评分。
即将进行在线考试? FormRead Online每个套餐均包含这些诚信工具,无需按考试付费。
了解FormRead Online主观题评分是工作的另一半。以下是纸质和在线场景下,依据评分标准进行AI评分的方式: 关于纸质考试中的开放题和论述题的 AI 评分
常见问题解答
AI 文本检测工具能证明学生使用了 ChatGPT 吗?
不能。AI 文本检测工具给出的是概率,而非证据,并且会产生误报,尤其是在短文本以及非母语者的写作上。OpenAI 于 2023 年因准确率低而撤回了其自家的 AI 文本分类器。如果使用,也应将其视为众多信号中一个较弱的参考,而非唯一依据。
网络摄像头能阻止 ChatGPT 作弊吗?
只能部分阻止。摄像头可以发现手机或第二个人,但无法看到另一个窗口中打开的聊天机器人。全屏、标签页和粘贴检查有一定帮助,而题目设计的帮助最大。
什么是 AI 口试跟进?
学生提交书面答案后,AI会就其所写内容提出一个简短的口头问题,并对回答进行评分。亲自写下答案的人通常能用几句话解释清楚。而粘贴答案的人通常无法做到。
纸质考试是最安全的选择吗?
对于在您可控的考场中进行的高风险测试,通常是的。FormRead允许您将同一份试卷打印为涂卡答题纸,并通过手机照片进行评分,因此您无需重写任何内容即可切换格式。