Turnitin 的 AI 检测率是怎么算出来的?

Turnitin 的 AI 检测率不是一次扫描就给整篇文档盖章。它是一个句子级的流程:提取、分段、分类、汇总。我们拆解机制如何运作,模型能分析什么、不能分析什么,谁能看到分数,以及为什么低分会显示星号。

HumanPen 团队

· 10 分钟

简短回答

Turnitin 计算你的 AI 率的方式是把论文拆成句子,分成重叠片段,给每个片段一个 0 到 1 之间的概率值。这些分数汇总后形成整篇文档的百分比。模型只分析散文,不分析代码或项目符号。只有老师和管理员能看到分数,不过他们可以下载 PDF 分享给你。如果分数在 1% 到 19% 之间,报告显示星号而不是百分比。

检测机制如何运作

流程从你提交论文开始。Turnitin 这样描述:"When a paper is submitted to Turnitin, sentences from the submission are extracted and segmented into overlapping sections for prediction analysis. Each segment is classified by the AI detection model and given a value between 0 and 1, denoting the probability of the text being likely human or AI-generated. Each qualifying sentence within these segments inherits the segment's score. Since segments overlap, some sentences may have multiple scores, which are then pooled into a single score. These sentence scores are further aggregated and used to compute the overall document AI writing score."

这里有几个要点。第一,分析单位是句子,不是整篇文档。第二,片段是重叠的,一个句子可能属于多个片段,有多个分数被合并。第三,最终百分比是所有句子级分数的汇总。它不是一次判断,而是许多小判断的组合。

这就解释了为什么两篇百分比相同的文档,被标记文本的分布可能不同。一篇可能是少数几句话被严重标记,另一篇可能是很多句话被轻度标记。汇总把这些差异平滑成了一个数字。

模型分析什么、忽略什么

你文档里的所有内容并不会都被分析。Turnitin 指出:"The model does not reliably detect AI-generated text in the form of non-prose, or code, nor does it detect short-form/unconventional writing such as bullet points (short non-sentence structures)."

这意味着代码块、项目符号、编号列表等非散文元素被排除在 AI 检测分析之外。只有散文句子,也就是真正的段落连贯文本,才会被送入模型。Turnitin 接着解释:"This means that a document containing several different writing types would result in a disparity between the percentage and the highlights."

如果你的论文混合了长段散文、列表和代码片段,百分比只反映散文部分。高亮只覆盖散文。这会造成困惑,如果你把高亮文本和文档总长度对比,数字对不上。百分比是针对合格散文计算的,不是针对整篇文档。

谁能看到 AI 分数

学生不能直接看到 AI 写作检测指示器或报告。Turnitin 指出:"The AI writing detection indicator and report are not visible to students。" 还有:"Please note, only instructors and administrators are able to see the indicator."

这不意味着你永远看不到自己的分数。Turnitin 补充道:"However, with the PDF download feature, instructors can download and share the AI report with students." 所以看到你分数的途径是通过老师。如果老师愿意下载 PDF 并分享给你,你可以看到百分比、高亮和星号。如果他们不分享,你在 Turnitin 界面上看不到。学生端具体能看到什么、看不到什么,见Turnitin 学生登录:你能看到自己的 AI 分数吗

如果你需要查看报告以便修改,可以问老师是否可以下载 PDF 分享给你。很多老师愿意这么做,如果你解释说你想在最终提交前处理被标记的段落。

为什么低分会显示星号

如果 AI 分数在 1% 到 19% 之间,报告不显示百分比,而是显示星号 (%)。Turnitin 解释说:"To avoid potential incidence of false positives, no score or highlights are attributed for AI detection scores in the 1% to 19% range. When AI is detected below the 20% threshold in the report, it is now indicated with an asterisk (%) and no percentage is attributed."

星号意味着检测器发现了什么,但不足以给出具体数字。这个范围内也不会出现高亮。分数太低,Turnitin 不愿意指出具体段落是 AI 生成的。这是一种保守做法,目的是减少误报。

如果你看到星号,检测器确实在你的散文中发现了某些类 AI 模式。但置信度低于 Turnitin 愿意给出确定百分比的阈值。对大多数同学来说,星号不需要担心。老师真问起来该怎么说,见Turnitin AI 率上的星号(*%)是什么意思

拿到 AI 报告后该怎么做

如果老师把 PDF 报告分享给你,你看到百分比超过 20%,看高亮的段落。那些是模型判定为可能 AI 生成的具体片段。把修改集中在这些部分,顺序按只改写 Turnitin 报告标红的那几段来。保留你的引用、表格和代码块,这些不属于 AI 分析范围。

如果你看到星号,没有高亮段落需要处理。分数低于报告阈值。你仍然可以检查散文中是否有泛泛而谈或公式化的措辞,但没有具体的标记需要反驳。

如果你的百分比高到让你或老师担心,修改被标记的段落并重新提交。请注意模型会随时间更新,即使是同样的文本,重新提交可能得到不同分数,所以比较两份报告比比较两个分数更有用

符合条件时可以免费继续降 AI,所以你可以反复优化被标记的段落,直到百分比降到可接受的水平。

继续阅读