同じ文章なのにAIスコアが変わった?2026年9月にGPTZeroとCopyleaksがモデルを変更、Pangramは移行期限を設定

まったく同じ文章をAI検出ツールに2回かけたところ、1文字も変えていない(あるいはスコアの変動ほどには修正していない)のに数値が変わってしまった――。2026年9月18日から30日の間に、3つの検出ツールが判定を行うモデルを切り替えたか、あるいは切り替える予定になっていました。ここでは、GPTZero、Copyleaks、Pangramの3社がそれぞれ何をいつ発表したのか、公表内容がどこまでで止まっているのか、そして手元にある2つのスコアがそもそも比較可能なものなのかを見極める方法を整理します。

HumanPen チーム

· 9 分

1文字も変えていないのに、なぜAIスコアが変わったのか?

変わったのはあなたの文章ではなく、検出ツールの側である可能性があります。GPTZeroのリリースノートによると、同社が4oと呼ぶ新モデルは2026年9月18日にリリースされ、告知記事では9月20日に全ユーザー向けのデフォルトになったとされています。Copyleaksは9月22日にAIテキスト検出モデルのバージョン11.0をリリースしました。Pangramは、旧モデルである3.3.2が「until September 30, 2026」(2026年9月30日まで)デフォルトとして維持されると述べていました。もしあなたの2回のスキャンがこれらの日付の前後をまたいでいるなら、スコアが上下どちらに動いたとしても、その差はあなたが文章に加えた修正とはまったく関係がないかもしれません。

この記事で取り上げるのは、これら3つのサードパーティ製検出ツールです。比較している2つの数値がTurnitinのものである場合、同社のモデルは独自のリリーススケジュールで運用されており、詳細は同じ論文を再提出したのになぜAIスコアが変わったのか?で解説しています。

各社が何をいつ発表したのか

検出ツール変更内容各社が公表している日付記載場所
GPTZero同社が「4o」と呼ぶModel 4.10b9月18日リリース(リリースノート);9月20日から全ユーザー向けデフォルト(9月24日付の告知記事)GPTZeroのモデルリリースノートおよび告知記事「Introducing GPTZero 4o」
CopyleaksAI Text Detection Model V11.0(AIテキスト検出モデル バージョン11.0)9月22日CopyleaksのAPIドキュメントの「What's New」(更新情報)ページ
Pangram予定:Pangram 3.3.2からPangram 4へデフォルトモデルを移行Pangram 4は7月29日からAPI経由で利用可能;3.3.2は9月30日までデフォルトを維持PangramのPangram 4移行ガイドおよび発表記事

これらの日付のどれか1つだけを見ても、あなたのスキャンを判定したのがどのモデルだったのかは分かりません。各社の発表にはいずれも曖昧な部分が残されており、その内容はそれぞれ異なります。

GPTZero:1つのモデル、2つの日付

リリースノートの該当項目には、「September 13, 2026 (2026-09-13-base, Model 4.10b aka 4o) | released on September 18, 2026」(2026年9月13日(2026-09-13-base、Model 4.10b、別名4o)|2026年9月18日リリース)という見出しが付いています。つまり、項目の日付自体は9月13日となっているものの、記載されているリリース日は18日なのです。そこには2つの改善点として、「Decreased false positive rate on a variety of domains」(多様な領域における誤検知率の低減)と「Improved performance on third party benchmarks」(サードパーティ製ベンチマークでの性能向上)が挙げられています。

一方、このモデルを紹介するGPTZeroの告知記事は9月24日付となっており、そこでは異なる日付が示されています。「As of 20 September 2026, the updated model is available to all users and is the default model offered on GPTZero.」(2026年9月20日時点で、更新されたモデルは全ユーザーに提供されており、GPTZeroで提供されるデフォルトモデルとなっています)

どちらの日付が正しいのかを私たちが判断することはしません。9月18日より前のスキャンであれば両方の日付より前であり、9月20日以降のスキャンであれば両方の日付より後になります。その間のスキャンについては、どちらのモデルが適用された可能性もあります。

GPTZeroは頻繁にモデルを変更しています。リリースノートには2026年の日付を持つモデル項目が11件(「base」モデルが10件、多言語モデルが1件)記載されており、今回の更新がなかったとしても、数か月空けて行った2回のスキャンは異なるモデルによって判定されていた可能性が十分にあります。

新しい結果で気づくかもしれない点のひとつが、灰色のテキストです。4oの告知記事ではこれを新機能として紹介し(「We've also introduced a new highlighting color: gray」(新しいハイライトカラーとしてグレーも導入しました))、「Gray spans show which pieces of text are excluded by our AI detector」(グレーの箇所は、当社のAI検出器によって除外されたテキストを示しています)と説明しています。現在のところ、これは見出しを指します。しかし、リリースノートを見ると、その根本にある変更――見出しをモデルの入力から除外すること――は、それより早い8月1日(Model 4.8b)の日付で「headers are now excluded from our model's input」(見出しはモデルの入力から除外されるようになりました)として記載されています。スコアを比較する上で重要なのは、この8月1日というより早い日付です。8月1日より前のGPTZeroのスキャンでは見出しが判定に含まれていましたが、それ以降のスキャンでは除外されているのです。

Copyleaks:発表は開発者向けに書かれている

9月22日付のCopyleaksの更新履歴(changelog)には、「released version 11.0 of the AI Text Detection model」(AIテキスト検出モデルのバージョン11.0をリリースしました)とあり、これにより「improves detection accuracy and extends coverage to recently released large language models」(検出精度を向上させ、最近リリースされた大規模言語モデルへの対応を拡大しました)と説明されています。

続く段落を見れば、これが誰に向けたものなのかが分かります。「No request changes are needed - the modelVersion field in the response now returns v11.0.」(リクエストの変更は不要です。レスポンス内のmodelVersionフィールドは現在v11.0を返します)。これは他のソフトウェアの基盤となるCopyleaksのAPIドキュメントです。そこには、APIのAIテキスト検出で新モデルが稼働したことは書かれていますが、Copyleaksのウェブサイトや、大学のシステムに組み込まれたバージョンがいつ同じ切り替えを行ったのかについては書かれていません。

もっとも、教職員に向けて事前に注意を促した大学もあります。カニシウス大学(Canisius University)の教員育成・イノベーションセンター(Center for Faculty Development and Innovation)のブログに掲載された9月14日付の記事には、「On Tuesday, September 22nd, Copyleaks will be updating their AI text detector model to help ensure accuracy with AI content detection.」(9月22日(火)、CopyleaksはAIコンテンツ検出の精度を担保するため、AIテキスト検出モデルのアップデートを実施します)と記されていました。さらに、「instructors should monitor their scans and be aware of variances with scan results and adjust settings accordingly.」(教員は自身のスキャン状況を注視し、スキャン結果の変動に留意した上で、必要に応じて設定を調整してください)とも付け加えられています。これは1つの大学が約1週間前に伝えた周知にすぎず、具体的なバージョン名も挙げられていません。しかし、この変更が開発者のコード上だけでなく、教員によるスキャン結果にも現れると想定されていたことを示唆しています。

Copyleaksの判定結果がどのモデルによるものかを特定する必要がある場合、APIにはその答えが含まれています。Copyleaksは2024年4月16日にAI検出結果へ`modelVersion`フィールドを追加しました。ただし、その番号が手元のレポートに表示されているかどうかは、そのレポートを出力したシステムによって異なります。

Pangram:期限は設定されたが、切り替え完了は未確認

Pangram 4は2026年7月29日に「released through the API」(API経由でリリース)されました。移行ガイドには、「Pangram 3.3.2 is still the default and will remain live until September 30, 2026.」(Pangram 3.3.2は引き続きデフォルトであり、2026年9月30日まで稼働を継続します)と記載されています。発表記事では、特定のモデルを指定しないソフトウェアにとってこれが何を意味するかが明確に説明されています。「Default requests that don't specify a model will continue routing to Pangram 3 using the previous billing system, until Pangram 3 is deprecated.」(モデルを指定しないデフォルトのリクエストは、Pangram 3が廃止されるまで、従来の課金体系のままPangram 3へとルーティングされ続けます)

つまりPangram側の説明に従えば、モデル名を指定せずにPangramを呼び出していたプラットフォームには9月中ずっと3.3.2が割り当てられており、同社の計画上は9月30日を過ぎるとそれが停止することになっていました。

確認できなかったのは、その切り替えが実際に実行されたかどうかです。10月2日時点で私たちが確認したPangramのどのページにも、切り替え完了の記述はありませんでした。移行ガイド(最終更新:8月7日)、発表記事、Pangram 4のモデルカード、APIリファレンスのいずれも同様です。APIリファレンスには、「default」設定について「follows Pangram's current default model」(Pangramの現在のデフォルトモデルに準拠する)と書かれているのみで、現時点でそれがどのモデルを指すのかは明記されていません。また、これらはすべてAPIに関する記述です。移行期間中にPangram自身のウェブサイトでどのモデルが使われていたのかについても言及はありません。

ただし、ごく限定的な範囲ではあるものの、目に見える兆候もあります。Pangramの移行ガイドによると、セグメント(「window」)ごとの判定ラベルが変更されました。「AI-Assisted replaces the previous Lightly AI-Assisted and Moderately AI-Assisted labels.」(これまでのLightly AI-AssistedおよびModerately AI-Assistedラベルに代わり、AI-Assistedが使用されます)。また、API経由で取得したPangram 4の結果では、バージョンとして「4.0」が返されます。したがって、以前の結果でセグメントに「Moderately AI-Assisted」と表示されていたのに対し、その後の結果で「AI-Assisted」としか表示されない場合、その2つは同じモデルから出力されたものではありません。ただし、これには2つの制約があります。第1に、これは個々のセグメントのラベルの話であり、文章全体の総合判定のことではありません(Pangram 4のAPIサンプルでも総合判定は「AI Assisted」と表記されています)。第2に、Pangramの2025年12月の発表によると、無料ユーザーには「lightly AI-assisted text as Human, and moderately AI-assisted text as AI-generated」(軽度のAI支援テキストはHumanとして、中度のAI支援テキストはAI-generatedとして表示される)仕様となっていたため、無料アカウントでは以前の2段階のラベル自体を一度も目にしたことがない可能性があります。

アップデート後にスコアが上下しても、修正の良し悪しは分からない

各社によるアップデートの説明は、いずれも抽象的な表現にとどまっています。GPTZeroは「on a variety of domains」(多様な領域において)誤検知を低減したと述べており、Copyleaksはバージョン11.0によって「improves detection accuracy」(検出精度を向上させ)より新しい言語モデルに対応したとしています。どちらの説明も、特定の個別の文章のスコアが上下どちらに動くのかについては一切言及していません。

したがって、これらのアップデートの後にスコアが下がったとしても、書き直しが功を奏した証拠にはなりません。逆にスコアが上がったとしても、書き直したことで悪化した証拠にはなりません。手元にある2つの数値には、文章への修正とモデルの変更という2つの要素が混ざり合っており、どちらの結果を見てもその影響を切り分けることはできないのです。

2つのスコアを公正に比較する方法

  1. 日付を照合する。 各スキャンを実施した日付を書き出し、上記の日付と照らし合わせてください。もしスキャンの間にそれらの日付が挟まれているなら、その2つの数値は「まったく別の2台の測定器で測った数値」として扱う必要があります。
  2. 設定が一致しているか確認する。 ツールによっては、スキャンを実行する側がモードを選択できるものがあります。GPTZeroの発表には「Advanced Scan」(高度なスキャン)モードへの言及があり、Originality.aiではモデル別のスキャン(「Classic」)や、0%、5%、15%、25%、40%から選ぶ「AI Allowance」(AI許容量)の設定が可能です。測定モードが異なれば、それは別の測定です。
  3. 修正の効果を確認したいなら、同じ日に両方のバージョンをスキャンする。 修正前の旧稿と修正後の新稿を、同じツール、同じ設定で、立て続けにスキャンします。そうすれば、両方に使われるモデルはほぼ確実に同一となり(結果にモデル名やバージョンが表示されている場合は、念のため一致しているか確認してください。9月18日から20日のような移行期には、同日でもブレが生じる可能性があります)、生じた差分は純粋にテキストの変更によるものだと判断できます。ただし、それでも分かるのは「その特定のツールがその日にどう判定したか」にすぎず、所属機関のツールがどう判定するかまでは分かりません。
  4. 数値だけでなく、結果画面全体を保存しておく。 スクリーンショットを撮るかレポート自体を保存し、日付、実行モード、表示されているモデル名やバージョン番号を残しておきましょう。後からメモ帳に「34%」と書き写しただけの数字では、リリースノートと照合することができません。
  5. 他人がスキャンを実行した場合は、3点を確認する。 どのツールを使ったのか、何日に実施したのか、どの設定やバージョンだったのかの3点です。これらが不明なままでは、提示された数値を自分自身のセルフチェック結果を含め、いかなる数値とも比較することはできません。

同一のファイルに対して異なるツール間で判定が食い違う問題には別の理由があり、これについては同じ文章でも検出ツールによってスコアが異なる理由で解説しています。また、GPTZeroの結果に表示される各ラベルの意味については、GPTZeroの「Mixed」と「AI-Polished」:各判定ラベルの意味をご覧ください。

よくある質問

過去のスキャン結果は新しいモデルで再スコア化されますか? ここで引用した3社の発表のいずれにも、過去の結果が再採点されるという記載はありません。保存されている結果は、あくまでその日に稼働していたモデルによる測定値として扱ってください。なお比較対照として、Turnitinのモデルリリースノートには「This release will not retroactively update previously-generated AI writing reports.」(本リリースによって、過去に生成されたAI writing reportsが遡及的に更新されることはありません)と明記されています。

教員によるスキャンはアップデート前で、自分のスキャンはアップデート後でした。どちらが有効ですか? どちらかがもう一方を無効にするということはありません。これらは異なる2つのモデルによる測定値であり、設定自体が異なっていた可能性も大いにあります。大学の講義等で判断基準として扱われるのは教員が実行したスキャンであるため、確認すべき有意義な点は「どのツールを使い、何日に、どの設定で実行されたのか」です。新しいモデルを使ってあなたが今スキャンを実行したとしても、それは教員のスキャンを再実行したことにはならないのです。

これはTurnitinのスコアにも影響しますか? いいえ、影響しません。Turnitinは独立した別企業であり、モデルのリリースも独自に行われています。同様の方法でTurnitinの更新日を確認してください。

出典

  • GPTZero、GPTZero Release Notes (Model and API)(GPTZero リリースノート(モデルおよびAPI))、2026年9月13日(Model 4.10b)および2026年8月1日(Model 4.8b)の項目;2026年10月2日参照。
  • GPTZero、Introducing GPTZero 4o(GPTZero 4oの紹介記事)、2026年9月24日付;2026年10月2日参照。
  • Copyleaks、What's New(APIドキュメント)、2026年9月22日および2024年4月16日の項目;2026年10月2日参照。
  • カニシウス大学(Canisius University)教員育成・イノベーションセンター(Center for Faculty Development and Innovation)、Copyleaks AI Text Detector Model Update(Copyleaks AIテキスト検出モデルのアップデート)、2026年9月14日付;2026年10月2日参照。
  • Pangram、Pangram 4 Migration Guide(Pangram 4移行ガイド、2026年8月6日)およびIntroducing Pangram 4(Pangram 4の紹介、2026年7月29日);Introducing Pangram 3.0 with AI assistance detection(AI支援検出機能を備えたPangram 3.0の紹介、2025年12月11日);PangramのAPIリファレンス内のAI DetectionおよびModels;いずれも2026年10月2日参照。
  • Originality.ai、Introducing AI Allowance(AI Allowance機能の紹介);2026年10月2日参照。

続きを読む