Erkennt Turnitin die Reasoning-Modelle OpenAI o1 und o3?

Reasoning-Modelle denken nach, bevor sie schreiben – ihr endgültiger Text stammt jedoch nach wie vor aus einem autoregressiven Modell. Genau die Disziplin und Gleichförmigkeit, die ihre Logik so präzise macht, führt zu einer Satz-Perplexität, die von Detektoren leicht erkannt werden kann.

HumanPen-Team

· 7 Min. Lesezeit

Kann Turnitin Aufsätze erkennen, die mit OpenAI o1 oder o3 verfasst wurden?

Ja. Turnitin markiert Aufsätze und akademische Fachtexte, die mit OpenAI o1, o1-preview, o1-mini und o3-mini erstellt wurden, mit hoher Zuverlässigkeit, sobald der Text die Standardanforderungen an qualifizierenden Text erfüllt.

Ein weit verbreitetes Gerücht besagt, dass OpenAI-Reasoning-Modelle durch ihre mehrstufige interne Chain of Thought menschliche Denkprozesse so gut nachahmen, dass ihre Texte einer automatisierten Erkennung entgehen. Diese Annahme verwechselt jedoch den Entstehungsprozess mit dem fertigen Text. Turnitin prüft nicht, wie ein Modell im Hintergrund logische Schlüsse zieht, sondern analysiert die statistischen Eigenschaften der tatsächlich auf der Seite sichtbaren Wörter. Da dieser finale Text von einem autoregressiven Transformer-Decoder erzeugt wird, weist er genau die niedrige Perplexität und die gleichförmigen Satzstrukturen auf, die für große Sprachmodelle typisch sind.

Ein o1-Text entgeht einer KI-Markierung vor allem dann, wenn die Ausgabe aus nicht qualifizierendem Material besteht – etwa aus freistehenden mathematischen Formeln, reinem Programmcode oder kurzen Stichpunktlisten. Turnitin schließt solche Formate bei allen Modellen standardmäßig von der KI-Bewertung aus – nicht etwa, weil Reasoning-Modelle über besondere Fähigkeiten zur Tarnung verfügen.

Verborgene Chain of Thought versus finale Textausgabe: Was der Detektor wirklich sieht

Um zu verstehen, warum Reasoning-Modelle dennoch markiert werden, müssen Sie den Generierungsprozess in zwei getrennte Phasen unterteilen: das interne Nachdenken und die sichtbare Textausgabe.

  • Interne Denk-Tokens (latente Chain of Thought): Während der Überlegungsphase erzeugen Modelle wie o1 und o3 umfangreiche interne Denkketten. Sie wägen Rahmenbedingungen ab, korrigieren frühe logische Annahmen und strukturieren die Argumentation. OpenAI kapselt diesen Schritt in verborgenen Reasoning-Tokens ab, die weder in der finalen API-Antwort noch im Chat-Interface auftauchen und somit auch nie in einer eingereichten Studienarbeit stehen.
  • Sichtbare Completion-Tokens (ausgegebener Text): Sobald der interne Denkprozess abgeschlossen ist, generiert das Modell den endgültigen Text für den Nutzer. Diese Ausgabe entsteht durch ganz normales autoregressives Token-Sampling – mechanisch völlig identisch mit GPT-4o oder jedem anderen modernen Sprachmodell.

Turnitin erhält ausschließlich diese letzte sichtbare Textschicht. Das Einreichungsportal speichert weder den Prompt noch die Modellversion, die Generierungsdauer oder die internen Reasoning-Tokens. Sobald ein Word-Dokument oder eine PDF-Datei in die Verarbeitungswarteschlange gelangt, extrahiert der Detektor den reinen Fließtext und analysiert die Wortabfolge.

Der Detektor zerlegt den Text in einzelne Sätze und leitet sie durch einen transformerbasierten Klassifikator. Dieses neuronale Netz bewertet, ob die gewählten Tokens und die Satzstrukturen den typischen statistischen Mustern maschinell erstellter Texte entsprechen. Dass das Modell zuvor unsichtbar nachgedacht hat, ändert nichts daran, dass die resultierenden Sätze den gewöhnlichen Wahrscheinlichkeitsverteilungen eines Sprachmodells folgen.

Warum logische Strenge die statistische Vorhersehbarkeit sogar noch erhöht

Das Paradoxon moderner Reasoning-Modelle liegt darin, dass ihre größte intellektuelle Stärke – die lückenlose, schrittweise logische Konsistenz – sie für einen Textdetektor statistisch berechenbarer macht, nicht unberechenbarer.

KI-Klassifikatoren bewerten Texte vor allem anhand von zwei Kennzahlen: Perplexität (wie wahrscheinlich jedes nachfolgende Wort auf Basis der vorangegangenen Wörter ist) und Burstiness (wie stark Perplexität und Satzlänge über den gesamten Text hinweg schwanken). Wenn ein Standardmodell Texte generiert, führen kreative Prompts oder freie Assoziationen mitunter noch zu Wörtern mit geringerer Wahrscheinlichkeit. Im Gegensatz dazu sind per Reinforcement Learning trainierte Reasoning-Modelle darauf optimiert, Denkfehler zu minimieren und Mehrdeutigkeiten auszuschließen. Sie greifen daher ganz automatisch zu kanonischen Formulierungen, direkten syntaktischen Verknüpfungen und etablierten Übergängen.

Menschliches Schreiben ist von Natur aus unregelmäßig und weist eine hohe Burstiness auf. Studierende, die eine Arbeit eigenhändig verfassen, wechseln ihren Rhythmus unvorhersehbar: Auf ein komplexes Satzgefüge zur Erklärung einer differenzierten Theorie folgt ein knapper Einwurf, eine umgangssprachliche Wendung oder eine ungewöhnliche Metapher. Menschliche Autoren hinterlassen ungleichmäßige grammatikalische Spuren, stilistische Eigenheiten und Wortkombinationen, die im Abgleich mit allgemeinen Sprachkorpora eine hohe Perplexität aufweisen.

Reasoning-Modelle produzieren Texte mit der Gleichmäßigkeit eines Metronoms. Jede Behauptung stützt sich auf eine sauber hergeleitete Prämisse, die Satzlängen orientieren sich eng an syntaktischen Mittelwerten und die Wortwahl bleibt von Anfang bis Ende vorhersehbar. Für einen Klassifikator, der nach synthetischen Regelmäßigkeiten sucht, ist diese unerschütterliche strukturelle Disziplin eines der deutlichsten Anzeichen für eine maschinelle Urheberschaft.

MINT-Herleitungen versus geisteswissenschaftliche Texte: Wo die Regeln für qualifizierenden Text greifen

Die weit verbreitete Annahme, OpenAI o1 sei für Turnitin unsichtbar, entstand vor allem in MINT-Fächern: Dort bemerkten viele, dass Laborberechnungen und Programmieraufgaben einen KI-Score von null Prozent erzielten.

Der Grund dafür liegt in den offiziellen Zulassungskriterien von Turnitin, der sogenannten Regel für qualifizierenden Text. Turnitin setzt mindestens 300 Wörter zusammenhängenden Fließtext in normaler Absatzform voraus, bevor der KI-Detektor überhaupt ein Ergebnis berechnet. Zudem entfernt die Vorverarbeitung mathematische Formeln, LaTeX-Befehle, Quellcode, Stichpunktlisten und Literaturverzeichnisse vollständig aus der Analyse. Wenn Studierende also o1-mini nutzen, um Differentialgleichungen zu lösen oder Python-Funktionen zu schreiben, ignoriert Turnitin diese Abschnitte komplett – der Bericht bleibt ohne jeden Befund.

Das Bild ändert sich grundlegend, sobald dasselbe Modell längere Fließtexte verfassen soll. Bei soziologischen Essays, Literaturübersichten, philosophischen Arbeiten oder den Einleitungskapiteln wissenschaftlicher Berichte besteht die Ausgabe aus regulären Absätzen. Diese Texte erfüllen ausnahmslos alle Kriterien für qualifizierenden Text und werden direkt an den neuronalen Klassifikator weitergeleitet.

Wird dieser Standardanalyse unterzogen, erzielt Fließtext aus o1 und o3 Erkennungsraten, die mit denen von GPT-4o vergleichbar sind. Anekdotische Berichte, wonach Reasoning-Modelle nicht erkannt werden könnten, gehen fast immer auf Einreichungen zurück, die von vornherein überhaupt keinen qualifizierenden Fließtext enthielten.

Der Mythos des „nicht erkennbaren“ KI-Modells

Mit jedem größeren Entwicklungssprung bei Sprachmodellen taucht die Behauptung auf, automatische Erkennungsverfahren seien nun endgültig veraltet. Dieses Narrativ gab es bereits bei GPT-3, es wiederholte sich bei GPT-4 und kam mit dem Erscheinen der o-Serie von OpenAI erneut auf.

In der Praxis ist KI-Erkennung kein starrer Filter, sondern ein fortlaufender technischer Kalibrierungsprozess. Turnitin aktualisiert regelmäßig seine Klassifikationsgewichte und überprüft die Erkennungsleistung anhand neu veröffentlichter Basismodelle. Da Transformer-Modelle grundlegende Architekturen und Trainingsdaten teilen, weisen auch die Texte neuerer Modelle charakteristische statistische Häufungen auf, die sich deutlich von der Vielfalt menschlicher Studierender abheben.

Gängige Prompting-Tricks zur Umgehung der Erkennung – etwa die Anweisung an o1, in einem lockeren Tonfall zu schreiben, gezielt Zeichensetzungsfehler einzubauen oder die Absatzlänge zu variieren – schlagen häufig fehl. Solche Vorgaben können die logische Schlusskraft des Modells beeinträchtigen und erzeugen oft unnatürliche, künstliche Stilmerkmale, die von Klassifikatoren bei der Analyse mehrerer zusammenhängender Sätze dennoch markiert werden.

Derzeit gibt es kein Sprachmodell, dessen längere Fließtexte grundsätzlich vor einer statistischen Klassifikation gefeit wären. Wer darauf vertraut, dass ein Modell nur deshalb unbemerkt bleibt, weil es neu ist, verkennt die Funktionsweise der maschinellen Textgenerierung.

Unerwartet hohe KI-Bewertung im Entwurf: Vorgehen bei der gezielten Überarbeitung

Zeigt eine eingereichte Arbeit oder ein Vorab-Check einen unerwartet hohen KI-Prozentsatz an, ist ein systematisches Vorgehen weitaus zielführender als der panische Versuch, das gesamte Dokument von Grund auf neu zu schreiben.

  • Dokument-Versionsverlauf sichern: Behalten Sie vollständige Versionsprotokolle auf Ihrer Schreibplattform bei – sei es über den Versionsverlauf von Google Docs, die Änderungsverfolgung in Word oder Commit-Logs in Overleaf. Lückenlose Zeitstempel und Zwischenstände belegen nachvollziehbar die eigene wissenschaftliche Eigenleistung.
  • Markierte Abschnitte isolieren: Prüfen Sie den Analysebericht genau, um festzustellen, welche Sätze und Absätze der Klassifikator konkret beanstandet hat. Importieren Sie den Turnitin- oder iThenticate-Bericht und überarbeiten Sie nur die darin markierten Passagen. Sie erhalten eine bearbeitbare Datei im selben Format zurück.
  • Den Text wieder im eigenen Kontext verankern: Ersetzen Sie beim Überarbeiten markierter Absätze abstrakte Verallgemeinerungen durch Zitate aus Primärquellen, konkrete Beobachtungen aus Seminardiskussionen und Ihre eigene analytische Perspektive. Passen Sie Satzgrenzen von Hand an, um Ihren persönlichen Schreibstil und Rhythmus widerzuspiegeln.

Vermeiden Sie es, das gesamte Manuskript durch automatisierte Paraphrasier-Tools laufen zu lassen. Ein pauschales Umschreiben verfälscht häufig die Fachterminologie, bringt Zitatverweise durcheinander, zerstört Tabellenlayouts und erzeugt am Ende lediglich neue, vorhersehbare maschinelle Muster.

Häufig gestellte Fragen

Bettet OpenAI o1 digitale Wasserzeichen ein, nach denen Turnitin sucht? Nein. Turnitin erkennt KI-Texte nicht anhand kryptografischer Wasserzeichen oder versteckter Dokument-Metadaten. Der Detektor bewertet die statistische Wahrscheinlichkeitsverteilung des sichtbaren Textes selbst. Auch ohne Wasserzeichen liefern die autoregressiven Satzstrukturen ein ausreichend klares statistisches Signal für eine Erkennung.

Wird o1-mini anders erkannt als das reguläre o1-Modell? Beide Modelle weisen bei zusammenhängendem Fließtext hohe Erkennungsraten auf. Obwohl o1-mini speziell für Programmieraufgaben und quantitative Fragestellungen feinabgestimmt wurde, führt die Generierung allgemeiner wissenschaftlicher Absätze oft zu einem eingeschränkteren Wortschatz und einer noch höheren Vorhersehbarkeit. Dadurch ist der resultierende Fließtext für Klassifikatoren gleichermaßen auffällig.

Markiert Turnitin meinen Aufsatz, wenn ich o1 ausschließlich für Gliederung und Recherche nutze? Nein. Turnitin bewertet ausschließlich den im Dokument eingereichten, endgültigen Text. Wenn Sie ein KI-Modell für Brainstorming, die Gliederung Ihrer Argumente oder das Verständnis mathematischer Konzepte nutzen, führt das zu keiner Markierung – vorausgesetzt, Sie verfassen die eigentlichen Absätze selbst mit Ihrer eigenen, authentischen Stimme.

Warum erzielte ein Studierender mit o1 einen Wert von null Prozent, während ein anderer neunzig Prozent erhielt? Der Unterschied liegt fast immer in der Textformatierung und der wissenschaftlichen Disziplin. Eine Arbeit, die überwiegend aus Code-Ausschnitten, Formeln oder kurzen Stichpunkten besteht, wird von den Turnitin-Filtern für qualifizierenden Text ausgeschlossen und weist daher keine Markierungen auf. Eine Einreichung, die aus regulären Absätzen der Geistes- oder Sozialwissenschaften besteht, wird hingegen vollständig analysiert und markiert.

WEITERLESEN