TurnitinのAI率、提出して安全なのはいくらまでか——実際に使われている数字

万人に当てはまる「安全な」数字は存在しない。そうした数字を提示しているページは、話を単純化している。ただ、実際に使われている数字が出鱈目かというと、そうではない。関係しているのは三つの層だ。Turnitinの表示ルール（アスタリスク）、繰り返し引用される目安の数字（20% / 10% / 0〜5%）、そして自分の通う学校の方針。提出物について何かを決めるのは、その最後の一つだけである。

この記事で扱うのは、最初の二つの層と、三つ目の見つけ方である。

*% と表示されるスコアは、Turnitinが公式な「低い」帯域として示しているものに最も近い。1%から19%の範囲では、スコアもハイライトも一切付与されない。報告書には数字の代わりにアスタリスクが出る。その理由としてTurnitinが挙げているのは、この範囲での誤検出を避けるためである。

ここから、実務上二つの帰結が生じる。

この帯域では報告書にハイライトが付かない。つまり、指し示す対象が何もないということだ。低い数字は表示上の選択であって、何かが確認されたということではない。

しかも帯域が広い。1%から19%まで、アスタリスク表示としてはすべて同じ見え方になる。*% の報告書が教えてくれるのは、スコアが20未満だということだけであって、実際の値ではない。

フォーラムで飛び交っている20%、10%、0〜5%という数字には、二つの異なる出どころがある。どれがどちらかを押さえておけば、混乱の大半は防げる。

一つ目はTurnitin自身である。20%でアスタリスクに切り替わるというのは、同社が公開している表示ルールだ。「20%未満なら安全」と言うとき、実際に指しているのは、ベンダー自身が数字で報告することを拒んでいるスコア帯であることが多い。

二つ目は、学校やプログラムの方針である。大学はAIを利用した執筆に関する期待値をそれぞれ独自に定めている。方針文書に数字として書かれている場合もあれば、担当者が非公式に運用している実務上の目安という場合もある。こうした数字の世界共通の台帳は存在しないし、内容も変わる。

だから、「イギリスでは15%未満」「アメリカでは20%未満」といった一見普遍的に聞こえるアドバイスも、実際には人々がよく報告する内容の要約にすぎず、公開された基準ではない。

混乱の大半は、性質の異なる四種類の数字を同じものとして扱ってしまうことから生じている。これらは別物であり、同じ重みを与えてよいものではない。

提出物について何かを決めるのは、二行目だけである。一行目は実在するが、安全基準ではなく表示ルールだ。三行目は質問する価値がある。四行目は、どれほど自信たっぷりに語られても、価値はない。

理由がこれほど分かれるのは、スコアそのものが規則ではないからだ。それは統計モデルが出した数字にすぎず、それをどう扱うかは各機関が個別に決めている。

Turnitin自身のドキュメントには、この指標を教員が対応の唯一の根拠や決定的な評価基準として使うべきではないとある。同社は誤検出の検証にも具体的な目標値を設けている。AI生成文が20%を超える文書について1%未満——言い換えれば、人が書いた文書百件につき一件は、それでも検出される可能性がある。

同じ25%というスコアでも、指標を対話のきっかけとみなす大学と、ふるいとして使う大学では、読み取られ方が違う。モデルは同じでも、それを囲む方針は同じではない。

学校が実際に運用している基準を超えるスコアが出ると、何かが動き出す。たいていは対話で、ときに自動的な審査だ。それだけで、あなたに不利な認定が下るわけではない。Turnitinのガイダンスは明示的である。パーセンテージを対応の唯一の根拠にしてはならず、不正があったかどうかの判断には、さらに吟味と人による判断、そして機関自身の方針が必要だとしている。

自分の報告書を読むとき、この区別が効いてくる。高い数字は手続きを動かすのであって、手続きを終わらせるのではない。

ほかにも知っておきたい但し書きが二つある。数百語程度の短い文書では、予測はおおむね「all or nothing」（all or nothing＝全部かゼロか）になる。モデルが重なりなしの単一セグメントについて予測するためで、AIの文章と自分の文章が混ざったテキストが、全体としてAIと判定されることもある。もう一つ、300語未満の提出物については、Turnitin自身のリリースノートがスコアの精度はおそらく低いと述べている。短い文書が検出された場合こそ、その数字に最も重みを置くべきではない。

何パーセントなら安全かと問う代わりに、気になっているその数字を誰が決めたのかを問うてほしい。

あり得る答えは三つで、それぞれ取るべき行動が違う。

1. ネットで読んだアスタリスクの表示ルールだ——この場合、学校の方針は関係していない。表示されている*%はTurnitin自身の慎重な指標であって、あなたの学校については何も語っていない。
2. 級友やフォーラムが言っていた数字だ——この場合、行動に移す前に、自分のプログラムの実際のガイダンスと照合して確かめてほしい。
3. 学校の方針だ——この場合、それが問題の数字である。教員か、Turnitinを扱っている部署に尋ねるのが、本物の数字を手に入れる道だ。

もう一つ整理しておきたい事実がある。学生向けのアカウントには、AI指標は一切表示されない。見られるのは教員と管理者だけだ。教員がPDFの報告書を見せてくれたなら、あなたは学校が見ているものを見ている。もし第三者サービスの数字しか持っていないなら、それは別のツールの推定値であって、Turnitinのものではない。

どこでも「提出して安全」な単一のパーセンテージは存在しない。何かを決める数字は、自分の学校の方針だけだからだ。アスタリスクは1〜19%を意味し、Turnitinの表示ルールである。15%、20%、10%といった、人がやり取りするきりのいい数字には、どれほど自信たっぷりに引用されようと、公開された出典がない。そしてどの基準を越えても、スコアが動かすのは対話であって、決着ではない。誰かが安全な数字を教えてくれたら、それがどの層から来たのかを尋ねてほしい。その問い自体が、数字より価値がある。