「実際に機能する」AI ヒューマナイザーって何?検出器にとっての「機能する」の意味

「実際に機能する AI ヒューマナイザー」を探そうとする時、そもそもの問いかけがズレています。いったい何に対して「機能」すればいいのでしょうか?Turnitin 自身の公式ドキュメントによれば、同社の検出器はパラフレーザーやバイパス系ツールで加工されたテキストを検知できるように設計されています。検出器が読み取っているのは表面的な読みやすさではなく、単語の確率パターンです。検出器が何を測定しているかを理解すること。それが、ヒューマナイザーに何が必要なのかを理解する第一歩になります。

HumanPen チーム

· 6 分

手短に言うと

「実際に機能する AI ヒューマナイザー」を検索する人が求めているのは、たいてい AI スコアを下げてくれるツールでしょう。でも「機能する」という言葉は、検出器が何を読み取っているかを定義しないと意味をなしません。Turnitin の FAQ によると、検出器はテキストを重複するセグメントに分割し、それぞれが人間によるものか AI 生成によるものかを確率で分類します。モデルは単語の確率パターンを学習しています。つまりヒューマナイザーが「機能する」のは、フラグ付き箇所の単語確率プロファイルを十分に変化させて、分類器の出力をシフトできる場合だけです。文章をよりカジュアルに、より自然に聞こえるようにするツールが、それらのパターンを変えられるかどうかは別問題です。人間にとって人らしく聞こえることと、分類器にとって人らしく読まれることは、同じことではありません。

検出器が読み取っているもの

Turnitin の FAQ は检测パイプラインを次のように説明しています:

"When a paper is submitted to Turnitin, sentences from the submission are extracted and segmented into overlapping sections for prediction analysis. Each segment is classified by the AI detection model and given a value between 0 and 1, denoting the probability of the text being likely human or AI-generated. Each qualifying sentence within these segments inherits the segment's score. Since segments overlap, some sentences may have multiple scores, which are then pooled into a single score. These sentence scores are further aggregated and used to compute the overall document AI writing score."(論文が Turnitin に提交されると、提交文から文章が抽出され、预测分析のために重なるセクションに分割されます。各セグメントは AI 検出モデルによって分類され、0 から 1 の値が割り当てられます。これはテキストが人間によるものか AI 生成によるものかの確率を示します。これらのセグメント内の各対象文章はセグメントのスコアを継承します。セグメントは重なるため、一部の文章は複数のスコアを持つ可能性があり、それらは単一のスコアに統合されます。これらの文章スコアはさらに集約され、文書全体の AI 執筆スコアの算出に使用されます。)

検出器が読み取っているのは、単語の並びの統計的特徴です。議論の一貫性やトーンの学術性、文章の流れの良さを読んでいるのではありません。モデルが訓練データから学習したパターンを読み取っており、そのパターンは単語確率のレベルで表されます。

同じ FAQ から二つの重要な記述を抜粋します。第一に:"Our model is not explicitly programmed to evaluate specific signals such as 'burstiness,' 'perplexity,' or other individual metrics sometimes referenced in public discussions."(我々のモデルは、「バースティネス」や「パープレキシティ」、あるいは公開議論で時折言及される他の個別指標といった特定のシグナルを評価するように明示的にプログラムされているわけではありません。)続く文にはこうあります:"Instead, it learns statistical patterns from our training data."(代わりに、トレーニングデータから統計的パターンを学習します。)第二に:"Our classifiers are trained to detect these differences in word probability and are adept at the particular word probability sequences of human writers."(我々の分類器はこれらの単語確率の違いを検出するように訓練されており、人間ライターの特有の単語確率シーケンスの検出に長けています。)最初の記述はモデルが二つの指標を計算しないと言い、二つ目はモデルが単語確率で訓練されていると言います。矛盾はありません。モデルはパープレキシティという数値を計算して閾値と照合するわけではなく、単語確率データから学習します。つまりヒューマナイザーは、テキストの単語確率プロファイルそのものを変化させる必要があります。モデルが計算しているかどうかも分からない指標名だけを調整しても意味がありません。

Turnitin はヒューマナイザーの出力も検出する

ここで「機能する」の定義がさらに複雑になります。Turnitin の FAQ はこう述べています:

"Furthermore, it can also identify instances where AI-generated text may have been modified by AI paraphraser or bypasser (also called humanizers) tools to evade detection."(さらに、AI 生成テキストが検出回避のために AI パラフレーザーまたはバイパス系(ヒューマナイザーとも呼ばれる)ツールで変更された場合も、その事例を特定できます。)

Turnitin はパラフレーザーとバイパス系ツールを明確に挙げ、「ヒューマナイザー」という語を括弧書きで補足しています。これは検出器が AI 生成の生テキストだけを探しているわけではないことを意味します。AI テキストを人間が書いたように見せるために設計されたツールを通したテキストも検出対象です。この機能は時間をかけて強化されてきました。2023 年 12 月、Turnitin は「AI ワードスピナー」と呼ぶものの検出機能を追加しました。2025 年 8 月には、「AI 生成のみ」カテゴリに AI バイパス系ツールで変更されたテキストを含むよう検出器が更新されています。

ヒューマナイザーが「実際に機能する」かどうかを問う時、答えの一部は「検出器はヒューマナイザーの出力を積極的に探している」という事実です。別の AI モデルを使って AI テキストを単にパラフレーズするだけのツールは、Turnitin が検出可能と明言している種類のテキストを生成していることになります。つまり「機能する」は「別の AI にテキストを通して、うまくいけばいいなと願う」を意味できません。Turnitin は AI ヒューマナイザーを検出するか で FAQ が何を約束し、何を約束していないかを詳しく見ています。

誰も安全なツールリストを出せない理由

Turnitin はどの特定のツールを検出しているかも開示していません:

"Our AI writing detector has been trained and tested to detect leading paraphraser and bypasser tools. However, to safeguard the integrity of our solution and its effectiveness in maintaining academic honesty, we're unable to disclose the names of these tools. Sharing a list of tools that are detected would make it easier for students to evade our system, undermining our collective effort to ensure academic integrity."(我々の AI 執筆検出器は、主要なパラフレーザーおよびバイパス系ツールを検出するように訓練・テストされています。ただし、ソリューションの完全性と学術的正直性の維持における効果を保護するため、これらのツール名を開示することはできません。検出対象ツールのリストを共有すれば、学生が我々のシステムを回避しやすくなり、学術的正直性を確保するための我々の集合的な取り組みを損なうことになります。)

続く文:"Our product teams are constantly working to expand our detection capabilities."(我々の製品チームは検出機能を拡大するために継続的に取り組んでいます。)

つまり、Turnitin がどのツールを検出しているかは非公開で、かつ時間とともに変化するため、誰にも「安全」なヒューマナイザーと「検出される」ヒューマナイザーの検証済みリストは出せません。Turnitin に対してテスト済みで合格したと主張するツールはすべて、独立して検証不可能な主張をしているに過ぎません。検出範囲が公開されておらず、常に変化しているからです。言えるのは、検出器が散文テキストの単語確率パターンを読み取っているという事実だけです。原則として、それらのパターンを変化させるヒューマナイザーは正しい方向に進んでいます。実際に機能するかどうかは、フラグ付き箇所がモデルの学習パターンとどう比較されるかにかかりますが、それは出力を読んだだけで確認できることではありません。確認できるのはもっと限定的なことです。AI ヒューマナイザーの「書式を保持する」主張を確認する方法 はその具体例の一つです。

良い書き換えが実際に狙うもの

Turnitin の FAQ は偽陽性が出やすいテキスト特性も挙げています:

"Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas."(時折、偽陽性(人間が書いたテキストを誤って AI 生成としてフラグ付けすること)には、構造的な変化に乏しいコンテンツ、文字通り自分自身を繰り返すテキスト、新しいアイデアを展開せずにパラフレーズされたテキストが含まれる可能性があります。)

続く文:"If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated."(我々の指標がそのようなテキストにおいてより多くの AI 執筆を示している場合、表示されたパーセンテージを参照する際にそれを考慮に入れることをお勧めします。)

三つ目の項目を過大解釈する人がいます。でもリスト全体が何でできているか注意してください。構造がどれだけ変化しているか、テキストが自分自身を繰り返していないか、アイデアが展開されているか。これらは目の前の段落が持つ性質であり、そこに行き着いたまでの記録ではありません。より的確な単語を選ぶのは単なる編集です。我々のツールを含め、どの書き換えツールもそれを行います。このリストは編集操作の格付けではありません。このリストの真価は、自分の drafts チェックする時に発揮されます。フラグ付き段落を再読して、まだ自分自身を繰り返していないか、全ての文章が同じ形に着地していないか、以前には言っていなかったことを今は言っているか。これらの質問にはページ上に答えがあります。そして分類器はトーンではなく単語確率を読むため、どの変更が数値を動かしたかを読むだけで判断することはできません。それを知るのは新しいレポートを待つことです。Turnitin に最適な AI ヒューマナイザーはどれ?10 ツールを比較 で我々もその比較を試みています。

実務での意味

ここまでをまとめると:

  • ヒューマナイザーが「機能する」のは、テキストの表面的な読みやすさではなく、分類器が読み取る単語確率パターンを変化させた場合だけです。
  • Turnitin は AI 生成の生テキストだけでなく、パラフレーザーとバイパス系の出力も積極的に検出します。
  • Turnitin がどのツールを検出しているかを公開していないため、検証済みの安全なツールリストを誰にも提供できません。
  • 偽陽性リストは完成したテキストを記述しています:構造的変化、文字通りの繰り返し、アイデアの展開。編集操作の格付けではありません。
  • 検出器は意味やトーンではなく、確率で分類された重複テキストセグメントを読み取ります。

どの箇所がフラグされたかを示す Turnitin レポートをお持ちなら、それをインポート して、特にそれらの箇所に取り組みましょう。対象箇所の再実行は無料です。

続きを読む