Turnitin 误报:如何反馈以及该怎么做
Turnitin 的 AI 检测器误报目标低于 1%,但误报仍然会发生。我们解释哪些类型的文本最容易被错误标记、如何向 Turnitin 发送反馈,以及为什么百分比应该被视为一个数据点而非最终答案。
HumanPen 团队
· 11 分钟
简短回答
误报是指 Turnitin 将人类写的文本标记为 AI 生成。文档承认这种情况会发生,并要求用户反馈:"If you find AI written documents that we've missed, or notice authentic student work that we've predicted as AI-generated, please let us know! Your feedback is crucial in enabling us to improve our technology further."
如果你收到了误报,应该通过 Turnitin 的反馈渠道报告。同时,你应该把分数视为需要人工判断的信号,而不是最终裁决。
误报的目标值
Turnitin 为误报设定了明确的门槛。文档指出:"We strive to maximize the effectiveness of our detector while keeping our false positive rate - incorrectly identifying fully human-written text as AI-generated - under 1% for documents with over 20% of AI writing."
低于 1% 的目标值很低,但不是零。对于处理数千份提交的机构来说,哪怕不到百分之一也意味着有真实的学生要为自己亲笔写的作品接受质疑。1% 的误判率意味着什么按真实提交量把这笔账算过。这就是为什么 Turnitin 请求反馈,也是为什么分数设计为由教育者审核,而不是自动执行。
哪些类型的文本容易被误报
Turnitin 指出了容易触发误报的特定模式。文档指出:"Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas."
下一句同样重要:"If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated."
换句话说,如果你的写作恰好结构单一、有意重复、或大量改写来源却未加入新分析,检测器就更可能标记它。这并不意味着文本是 AI 生成的。而是这些文本与 AI 输出共享了一些表面模式,读百分比时应该带着这个背景去理解。同一效应的另一面,见为什么写得好的文章反而被判成 AI。
为什么分数不应作为唯一依据
Turnitin 明确表示检测器不是纪律工具。文档指出:"Our AI writing detection model may not always be accurate (it may misidentify human-written, AI-generated, and AI-paraphrased text), so it should not be used as the sole basis for adverse actions against a student."
下一句进一步强调:"It takes further scrutiny and human judgment in conjunction with an organization's application of its specific academic policies to determine whether academic misconduct has occurred."
这是 Turnitin 的直接说明:仅凭分数不足以认定学术不端。需要人工审阅者查看作品、适用机构政策,并做出判断。
分数作为单一数据点
文档进一步框定了分数的使用方式。它指出:"It is not meant to provide definitive answers in isolation. More important than any tool is the educator who sees the score and makes decisions balancing this information with their personal knowledge of their students, their work, and institutional policy."
下一句概括了预期的使用方式:"When educators look at the AI writing score and utilize it as a single data point rather than a definitive response, then it is being used as intended."
这是我们建议采用的态度。百分比是众多输入中的一个,不是裁决。如果你是教育者,请把分数与你对学生写作历史的了解、作业背景和机构政策结合起来。如果你是收到误报的学生,这种定位是你最有力的论据:工具本身说自己不应被视为最终答案。学校在这之外还会认哪些证据,见被误判为 AI 写作:怎么申诉,学校会认哪些证据。
如何反馈误报
Turnitin 在检测器犯错时主动邀请反馈。文档说:"If you find AI written documents that we've missed, or notice authentic student work that we've predicted as AI-generated, please let us know! Your feedback is crucial in enabling us to improve our technology further."
要反馈误报,请使用 Turnitin 的反馈渠道。附上文档、报告的 AI 写作百分比,以及你认为被标记文本是人类写作的简要说明。反馈越具体,对改进模型越有用。但向厂商反馈并不能解决你和学校之间的这件事,那是另一条线,见AI 检测器误判了,怎么证明这篇东西是你自己写的。
在等待回复或审核期间,把注意力放在被标记的段落上。如果论文的某些部分触发了检测,修改这些具体段落以增加结构变化、加入原创分析、减少重复表述,可能有助于再次提交时的结果。这一遍怎么收窄范围,见只改写 Turnitin 报告标红的那几段。
现在该做什么
如果你的 Turnitin 报告标记了自己写的段落,请按以下步骤操作:
- 通过 Turnitin 的反馈渠道报告误报。
- 对照 Turnitin 描述的模式检查被标记段落:结构单一、重复、未加入新想法的改写。
- 修改被标记部分,加入变化和原创分析。
- 按照Turnitin 文档的要求,将分数视为单一数据点,而非最终裁决。
符合条件时可以免费继续降 AI,所以你可以反复优化被标记的段落,直到百分比降到可接受的水平。
继续阅读