Turnitin は詩、脚本、注釈付き書誌で AI を検出できるのか?

創作ライティングの課題で、なぜそう判定されたのか分からない AI スコアが出たことがあるのではないだろうか。Turnitin のヘルプ記事には、AI 検出モデルは散文以外の形式、つまり詩・脚本・注釈付き書誌については確実な検出ができないと明記されている。さらに、複数の執筆形式が混在する文書では、パーセンテージとハイライト表示が食い違うことがあるとも書かれている。この記事では、その意味するところを学生と教員の立場から解説する。

HumanPen チーム

· 5 分

公式の記載内容

このトピックに直接言及している Turnitin のヘルプ記事がある。AI 検出モデルがカバーする範囲と、その外側について説明している。

"The model does not reliably detect AI-generated text in the form of non-prose, such as poetry, scripts, or code, nor does it detect short-form/unconventional writing such as bullet points, tables, or annotated bibliographies."(このモデルは、詩・脚本・コードといった散文以外の形式で生成された AI テキストを確実に検出することはできず、箇条書き・表・注釈付き書誌といった短形式または非定型の執筆形式も検出しない。)

この一文は、モデルが確実に扱えない形式を具体的に挙げている。詩、脚本、注釈付き書誌が明記されている。

記事は続けて次のように述べている:"This means that a document containing several different writing types would result in a disparity between the percentage and the highlights."(つまり、複数の執筆形式を含む文書では、パーセンテージとハイライトの間に食い違いが生じる。)

以下でこの 2 文を紐解いていく。1 文目は適用範囲のギャップを定義し、2 文目はそのギャップが目に見える形で現れる現象、つまりあなたが自分のレポートで見たかもしれない不一致について説明している。

パーセンテージとハイライトが矛盾するのはなぜか

混乱を生む大半の原因は、ヘルプ記事の 2 文目に書かれている。複数の執筆形式を含む文書では、パーセンテージとハイライトが一致しなくなる。

具体的にどういうことか。パーセンテージはモデルが実際に解析したテキストに基づいて計算される。一方、ハイライトはモデルがフラグを立てた特定の箇所で示される。文書に散文と詩、脚本形式のセクション、注釈付き書誌のエントリなどが混在している場合、それら非散文部分は同じように解析されない。パーセンテージは解析対象となった部分全体を反映し、ハイライトはその中でフラグが立てられた箇所を示す。

結果として、パーセンテージが示す内容とハイライトされた箇所が示す内容が食い違うレポートになりうる。記事によれば、これは混合型の文書では想定される動作であり、不具合ではない。両方を照らし合わせて読む方法については、Turnitin AI 執筆レポートの読み方 で解説している。

なお、パーセンテージは提出物全体の割合ではない。解析対象として合格したテキストにのみ適用される数値だ。Turnitin AI 検出における判定対象テキストとは でその線引きが説明されている。モデルが確実に検出できない形式の部分が文書に含まれている場合、その部分はパーセンテージが説明する範囲から外れる。

詩、脚本、注釈付き書誌

ヘルプ記事では、創作ライティングや研究コースで特に関連の深い 3 つの形式が挙げられている。

詩は定義上非散文である。改行、断片的な構文、圧縮された表現は、モデルが解析対象とする標準的な文法文とは異なる。記事によれば、詩の形式で生成された AI テキストは確実に検出できない。

脚本は話者名、ト書き、対話のやり取りとして書かれる。この構造は連続した散文というより、むしろ短い断片の連続に近い。同じ適用範囲のギャップが当てはまる。

注釈付き書誌は、引用エントリと短い解説を組み合わせた形式だ。引用行自体は短形式で定型の書式に従っており、ヘルプ記事は注釈付き書誌をモデルが確実に検出できない形式として挙げている。

これらは常に検出をすり抜けるという意味ではない。記事の表現は「確実に検出できない(does not reliably detect)」だ。要点は、詩・脚本・注釈付き書誌中心のテキストから得られたスコアについては、この制限を念頭に置いて読むべきだということである。

創作ライティングを学ぶ学生への影響

課題が詩、戯曲の一場面、注釈付き書誌の場合、レポートに表示される AI パーセンテージがあなたの作品について語れることは限られている。

検出モデルは散文の文を中心に構築されている。提出物が主に非散文の場合、解析されるテキストは実際の内容のほんの一部しかないか、モデルが形式そのものをうまく扱えないこともある。そのような状況で低いパーセンテージや高いパーセンテージが出ても、「この文章は AI が生成した/していない」と直接結びつくわけではない。

教員向けには、判定が難しいテキストに関するガイダンスが FAQ にある。「そのようなテキストにおいて AI 執筆量が多いと示されている場合は、表示されたパーセンテージを参照する際にその点を考慮するよう推奨する」と記載されている。

この記述は、信頼性の低い読み取りを引き起こしうる特徴を持つテキストに関するもので、非散文形式にも同样の枠組みとして適用できる。詩や脚本の提出物で AI 執筆量が多いと表示された場合、形式を考慮に入れるのが公式のアプローチである。

学生にとっての結論は単純だ:創作ライティングの AI スコアを、あなたの作品についての強力な判断材料として扱ってはならない。レポートで信頼できるのはハイライトされた散文部分だ。パーセンテージは文書全体ではなく、解析されたテキストに基づく数値として読むのが適切である。

教員との対話法

詩や注釈付き書誌の提出物がフラグを立てられ、異議を唱えたい場合、/documentation には対話の拠り所となる具体的な表現が用意されている。

これらの形式を明記した特定のヘルプ記事を参照できる。その記事には、モデルは詩・脚本・コードの形式で生成された AI テキストを確実に検出できず、箇条書き・表・注釈付き書誌といった短形式または非定型の執筆形式も検出しないと書かれている。

同じ記事の 2 文目も参照できる。そこでは、複数の執筆形式を含む文書ではパーセンテージとハイライトの間に食い違いが生じると明言されている。これはまさにあなたが見ているかもしれない現象に対する公式の説明だ。

情報源を正確に伝えることが大切だ。形式のリストはある Turnitin ヘルプ記事からの引用である。FAQ にも簡潔な形で適用範囲がまとめられているが、この具体的なリストはその記事の記載内容だ。記事への帰属を明確にすることで、議論する際に正確さを保てる。

最後に、インジケーターは単独で解釈されることを想定していない。Turnitin の FAQ には、AI 執筆インジケーターのパーセンテージのみを行動の根拠として使用すべきではないと書かれている。信頼性の低い形式の解析から得られた創作ライティングのスコアは、他のケースよりもさらに頼りになる根拠とは言えない。この対話に関するベンダー側の公式指示は、AI パーセンテージが高い場合に教員が取るべき行動 にまとめられている。

授業で問題になる前に、自分の散文が AI 検出でどう読まれるか確認したい場合は、文章の一部をコピーしてチェックできる。そのためだけの無料トライアル を提供している。

続きを読む