Kann man bei Turnitin wirklich 0 % KI erreichen?

Ein aktueller KI-Schreibindikator von Turnitin kann 0 % anzeigen. Seit dem 8. Juli 2024 ist die Null die einzige exakte Zahl, die unterhalb von zwanzig überhaupt erscheint: Ergebnisse von 1 % bis 19 % werden als Sternchen dargestellt, ohne Prozentwert und ohne Markierungen. Berichte, die vor dieser Änderung der Anzeige erzeugt wurden, sind die Ausnahme; Turnitin sagt, dass sie weiterhin einen numerischen Wert unter 20 % zeigen können. Der Indikator ist für Studierende außerdem nicht sichtbar. Worauf die Leute also aus sind, wenn sie von „0 % KI" sprechen — eine kleine Zahl, die man immer wieder beobachten, anvisieren und bestätigen kann —, ist kein Zustand, den man normalerweise selbst steuert oder überhaupt zu sehen bekommt. Er erscheint auf dem Bildschirm einer anderen Person, unter einer Anzeigeregel, bei der das Datum zählt.

Im Rest des Textes geht es darum, was diese vier Zustände sind, warum der Raum zwischen null und zwanzig keine Abstufungen kennt und was eine 0 % klären würde — und was nicht —, falls Ihnen tatsächlich jemand eine zeigt.

In der aktuellen FAQ von Turnitin gibt es einen kurzen Abschnitt mit der Überschrift "What do the different indicators mean?" (Was bedeuten die verschiedenen Indikatoren?), der auflistet, was nach Abschluss der Verarbeitung neben einer Einreichung erscheint. Es sind vier Zustände, und die Unterschiede zwischen ihnen wiegen schwerer als die Unterschiede zwischen zwei Zahlen.

Die unteren beiden Zeilen sind überhaupt keine Ergebnisse: Im einen Fall weigert sich Turnitin, die Datei zu verarbeiten, im anderen versucht es es und scheitert. Liest man die oberen beiden zusammen, wird die Form der heutigen Skala deutlich. Ab zwanzig verhält sich der Indikator wie eine Messung: eine Zahl und markierte Passagen, die Sie sich ansehen können. Unterhalb von zwanzig verhält er sich wie ein Lichtschalter. Null ist die eine Stellung. Der Bereich von 1 % bis 19 % ist die andere.

Ein Bericht, der unter der seit dem 8. Juli 2024 geltenden Regel entsteht, gibt keine 4 %, 11 % oder 19 % aus; er zeigt stattdessen das Sternchen. Ein älterer Bericht kann eine dieser Zahlen behalten — deshalb gehört das Erzeugungsdatum zu jedem Wert, den Sie zitieren. Bei einem aktuellen Bericht beschreibt der Wunsch „ich will meinen Wert auf etwas ganz Kleines drücken" ein Ergebnis, das die Oberfläche für Sie gar nicht abstufen kann, und „ich will 0 %" benennt die einzige exakte Zahl unter zwanzig, die sie überhaupt anzeigt.

Die Regel ist veröffentlicht — und die Begründung dazu auch:

"False positives (incorrectly flagging human-written text as AI-generated) are a possibility in AI models. To avoid potential incidence of false positives, no score or highlights are attributed for AI detection scores in the 1% to 19% range. When AI is detected below the 20% threshold in the report, it is now indicated with an asterisk (*%) and no percentage is attributed." (Fehlalarme — also das fälschliche Kennzeichnen von menschlich geschriebenem Text als KI-generiert — sind bei KI-Modellen möglich. Um möglichen Fehlalarmen vorzubeugen, werden für KI-Erkennungswerte im Bereich von 1 % bis 19 % weder Wert noch Markierungen ausgewiesen. Wird im Bericht KI unterhalb der Schwelle von 20 % erkannt, wird das jetzt mit einem Sternchen (*%) angezeigt, und es wird kein Prozentwert ausgewiesen.)

Diese Grenze nimmt zwei Arten von Information weg, und die zweite bekommt weniger Aufmerksamkeit, als ihr zusteht. Die Zahl verschwindet — das ist der Teil, den alle bemerken. Die Markierungen verschwinden ebenfalls. Unterhalb der Schwelle liefert Ihnen der Bericht keine Passage zum Nachsehen und keine Verortung des Ergebnisses auf Satzebene.

Denken Sie das für eine Überarbeitung unter der heutigen Anzeigeregel zu Ende. Angenommen, das zugrundeliegende Ergebnis ist von 17 % auf 3 % gefallen. Beide Berichte zeigen ein Sternchen. Gleiches Symbol, gleiches Fehlen von Markierungen, in allem gleich. Die Arbeit hat stattgefunden; die Oberfläche hat kein Vokabular, um davon zu berichten. Wer behauptet, ein aktueller Bericht sei „von 15 % auf 4 %" gefallen, liefert zwei exakte Zahlen, die der Bericht gar nicht ausgegeben hat. Ein datierter Bericht von vor dem 8. Juli 2024 ist die Ausnahme, kein Beleg dafür, dass die heutige Regel anders funktioniert.

Nichts davon ist eine Regel über Fehlverhalten. Es ist eine Entscheidung darüber, was der Anbieter auf einen Bildschirm stellt; wann eine Hochschule eine Einreichung prüft, ergibt sich aus deren eigener Politik. Das haben wir in Ist 20 % KI zu hoch? durchgespielt.

Damit ist die Frage „kann ich auf 0 % kommen?" zuerst eine Frage des Zugangs und erst danach eine Frage der Schwierigkeit. Die FAQ erklärt das in zwei Sätzen, und der zweite ist der, der meistens unter den Tisch fällt:

"The AI writing detection indicator and report are not visible to students. However, with the PDF download feature, instructors can download and share the AI report with students." (Der Indikator und der Bericht zur Erkennung von KI-Text sind für Studierende nicht sichtbar. Mit der PDF-Download-Funktion können Lehrkräfte den KI-Bericht jedoch herunterladen und mit Studierenden teilen.)

An anderer Stelle derselben Seite: "only instructors and administrators are able to see the indicator." (Nur Lehrkräfte und Administratoren können den Indikator sehen.) Ihr eigenes KI-Ergebnis erreicht Sie also nur auf einem Weg, der darüber führt, dass jemand anders eine PDF herunterlädt und sie Ihnen schickt. Das ist ein realer Weg — viele Studierende haben ihren Bericht gesehen —, aber es ist kein Messgerät, das Sie selbst ablesen können.

Das heißt: Die Schleife, die die meisten Ratgeber stillschweigend voraussetzen, existiert nicht. Einreichen, Wert ansehen, überarbeiten, noch einmal ansehen — die beiden Schritte, bei denen hingeschaut wird, stehen nicht in Ihrer Macht. Stattdessen bekommen Sie ein einzelnes Urteil, später, womöglich weitergegeben, womöglich als Screenshot ohne Datum. Und wenn eine Betreuungsperson sagt, der Indikator „zeige nichts an", hat das seine eigene Reihe dokumentierter Ursachen, die nichts mit Ihrer Datei zu tun haben. Die haben wir in Warum Ihr KI-Wert fehlt oder widersprüchlich ist zusammengestellt.

Nehmen wir an, Sie bekommen trotzdem einen: Eine Lehrkraft lädt die PDF herunter, gibt sie Ihnen, und dort steht 0 %. So begründet Turnitin die Designentscheidung hinter dieser Zahl:

"In order to maintain this low rate of 1% for false positives, there is a chance that we might miss some AI written text in a document. We're comfortable with that since we do not want to incorrectly highlight human-written text as AI-written. For example, if we identify that 50% of a document is likely written by an AI tool, it could contain as much as 65% AI writing." (Um diese niedrige Fehlalarmrate von 1 % zu halten, nehmen wir in Kauf, dass wir in einem Dokument unter Umständen etwas KI-geschriebenen Text übersehen. Damit können wir leben, denn wir wollen keinen menschlich geschriebenen Text fälschlich als KI-geschrieben markieren. Wenn wir zum Beispiel feststellen, dass 50 % eines Dokuments wahrscheinlich von einem KI-Werkzeug stammen, könnte der tatsächliche Anteil bei bis zu 65 % liegen.)

Das ist ein Anbieter, der mit eigenen Worten sagt: Lieber übersehen wir KI-Text, als dass wir menschlichen Text markieren. Daraus folgen drei Konsequenzen, und sie wirken in beide Richtungen:

• Eine 0 % bescheinigt nicht, dass nichts KI-unterstützt war. Das Werkzeug ist so eingestellt, dass es eher zu wenig meldet. Eine Null passt zu einer sauberen Arbeit, aber ebenso zu einer Arbeit, die das Modell nicht erwischt hat — und der Bericht enthält nichts, woran sich die beiden Fälle unterscheiden ließen.
• Eine 0 % ist keine Aussage über Ihre ganze Datei. Der Prozentwert wird über die qualifizierende Prosa berechnet. Ein Dokument, das überwiegend aus Listen, Zahlentabellen und einem Literaturverzeichnis besteht, wurde verhältnismäßig wenig geprüft — seine Null deckt also weniger ab, als es scheint. Vollständige Absätze in Tabellenzellen sind ein eigener Fall: Turnitin sagt, dass Langprosa in Tabellen verarbeitet wird. Das Problem mit dem Nenner behandeln wir in Wie sich ein Turnitin-Bericht zur KI-Erkennung lesen lässt.
• Eine 0 % ist kein Beweis, den Sie in ein Gespräch mitnehmen können. Turnitin sagt ausdrücklich, dass es kein Fehlverhalten feststellt, sondern Daten bereitstellt, mit denen Lehrende entscheiden. Was die Frage „haben Sie das selbst geschrieben" tatsächlich beantwortet, sind Entwürfe, Quellen, Notizen und Ihre Fähigkeit, über die Arbeit zu sprechen. Dieses Material ist in Markiert, obwohl Sie es selbst geschrieben haben aufgelistet.

Eine Null ist die Ausgabe eines Klassifikators, berechnet über einen Teil eines Dokuments, an einem Tag, unter einer Modellversion. Es lohnt sich, sie zu haben. Sie klärt weniger, als die Wendung „0 % KI" verspricht.

Eine fehlende Zahl ist nicht automatisch eine Null. Manchmal gibt es kein Ergebnis; manchmal gibt es ein Ergebnis über null, dessen genaue Zahl zurückgehalten wird; und manchmal liefert eine kurze oder prosaarme Datei ein echtes Ergebnis über einen schmalen Nenner. Diese Fälle brauchen unterschiedliche Namen.

• Grauer Doppelstrich oder Verarbeitungsfehler: kein Ergebnis. Weniger als 300 Wörter Langprosa, mehr als 30.000 Wörter, eine nicht unterstützte Sprache oder ein nicht unterstützter Dateityp können die Datei ausschließen; ein eigener Fehlerzustand bedeutet, dass Turnitin bei der Verarbeitung gescheitert ist. Keines von beidem ist ein sauberer Wert, und keines sollte als 0 % weitergegeben werden. Alle Einzelheiten in Kann Turnitin eine ganze Abschlussarbeit prüfen?
• Sternchen: ein Ergebnis über null mit verborgener Zahl. Bei Berichten nach der heutigen Regel bedeutet es, dass der erkannte Bereich bei 1 % bis 19 % liegt. Prozentwert und Markierungen werden wegen der Fehlalarmgefahr zurückgehalten. Es ist kein leeres Feld, auch wenn es Ihnen keine Stelle liefert, an der Sie ansetzen könnten.
• Kurzes oder prosaares Dokument: womöglich trotzdem ein echtes Ergebnis. Nicht-Prosa verengt den Nenner; sie entfernt den Wert nicht von selbst. Bleiben mindestens 300 Wörter Langprosa übrig, kann die Datei weiterhin einen Bericht erzeugen. Bei einem Dokument von nur wenigen hundert Wörtern ist die Vorhersage laut Turnitin meistens "all or nothing" (alles oder nichts), weil es nur ein Segment gibt und keine Überlappung, über die sich mitteln ließe. Das ist eine Warnung vor extremen Ergebnissen, kein dritter Leerzustand. Die Quelle schließt die Null-Seite nicht aus, und die Null liegt innerhalb des von Turnitin veröffentlichten Erfolgsbereichs.

Die praktische Prüfung ist einfach. Ein Doppelstrich oder ein Fehler bedeutet: kein Wert. Ein Sternchen bedeutet: ein Wert über null, der nicht angezeigt wird. Eine blaue 0 % ist eine tatsächliche Ausgabe des Klassifikators, auch wenn die Datei kurz war oder der qualifizierende Nenner schmal. Die drei sollten nicht zu einer einzigen Vorstellung von „nichts erkannt" zusammengefasst werden.

Dreht man das alles um, fällt etwas leicht Verrücktes auf. Die Berichte, die Menschen erschrecken — die ab zwanzig —, sind die einzigen, die genug Information mitliefern, um etwas tun zu können. Sie haben eine Zahl und markierte Passagen. Im heutigen Bereich von 1 % bis 19 % haben Sie beides nicht; bei 0 % haben Sie die Zahl, aber keine markierte Passage zum Überarbeiten.

Das Tool HumanPen ist auf dieser Seite der Linie gebaut. Sie laden die DOCX-Datei zusammen mit dem KI-Bericht von Turnitin oder iThenticate hoch, und die markierten Passagen werden zum Arbeitsumfang. Nur dieser Text wird umgeschrieben; alles außerhalb bleibt unangetastet. Abgerechnet wird nach der Wortzahl des umgeschriebenen Texts, nicht nach der Länge der hochgeladenen Datei.

HumanPen bietet außerdem kostenlose Nachbetreuung: Für Ergebnisse, die die Voraussetzungen erfüllen, kann der KI-Anteil kostenlos weiter gesenkt werden. Diese Nachbetreuung verspricht kein bestimmtes Detektor-Ergebnis.

Nichts davon ist eine Prognose. Unsere eigene FAQ auf dieser Seite sagt es unmissverständlich: "Detectors keep changing, so no one can honestly promise a fixed outcome." (Detektoren verändern sich laufend, deshalb kann niemand ehrlich ein festes Ergebnis versprechen.) Der Prozentwert bei einer erneuten Prüfung ist unbekannt; ihn im Voraus zu nennen wäre erfunden. Turnitin hat nie gesagt, wie eine bestimmte Änderung einen Wert bewegen soll, und die oben beschriebene Anzeigeregel bedeutet, dass unterhalb der Schwelle eine solche Behauptung ohnehin niemand nachprüfen könnte. Was wir Ihnen sagen können, ist, welche Wörter angefasst werden und welche berechnet werden.

Kann ein Turnitin-Bericht zur KI-Erkennung tatsächlich 0 % zeigen? Ja. Die FAQ von Turnitin beschreibt den erfolgreichen Zustand als blauen Indikator mit einem Prozentwert zwischen 0 und 100, und die Null liegt in diesem Bereich. Der Vorbehalt beim Datum betrifft 1 % bis 19 %: Ältere Berichte können diese Zahlen behalten, aktuelle zeigen ein Sternchen.

Ist ein Sternchen dasselbe wie 0 %? Nein. Bei einem aktuellen Bericht bedeutet das Sternchen, dass KI im Bereich von 1 % bis 19 % erkannt wurde; Turnitin hält in diesem Bereich Zahl und Markierungen wegen der Fehlalarmgefahr zurück. Es ist ein Ergebnis über null, das die Oberfläche nicht beziffern will.

Kann ich meinen eigenen KI-Wert prüfen, bevor meine Betreuungsperson es tut? Nicht über den Indikator. Turnitin stellt klar, dass Indikator und Bericht zur Erkennung von KI-Text für Studierende nicht sichtbar sind und dass Lehrkräfte den Bericht als PDF herunterladen und teilen können. Was Sie sehen, sehen Sie, weil sich jemand entschieden hat, es Ihnen zu zeigen.

Wenn in meinem Bericht 0 % steht, bin ich dann sicher? Das ist ein gutes Ergebnis, aber keine Bescheinigung. Turnitin sagt, dass es in Kauf nimmt, KI-Text zu übersehen, um die Fehlalarmrate niedrig zu halten, und dass der KI-Wert kein Fehlverhalten feststellt. Beide Hälften davon zählen.

Bekomme ich durch Umschreiben 0 %? Der Prozentwert bei einer künftigen Prüfung lässt sich nicht versprechen. Ein Werkzeug, das einen nennt, zitiert ein Ergebnis, das es nicht hat. Was ein vom Bericht geführtes Umschreiben entscheidet, ist, welche Passagen verändert werden und welche genau so bleiben, wie Sie sie geschrieben haben.