Wie Lehrkräfte mit dem KI-Score von Turnitin umgehen sollten

Turnitin hat das an mehr als einer Stelle gesagt. In den FAQ zur Erkennung von KI-Texten heißt es: „Hence, we must emphasize that the percentage on the AI writing indicator should not be used as the sole basis for action or a definitive grading measure by instructors." (auf Deutsch: „Wir müssen daher betonen, dass der Prozentwert des KI-Schreibindikators nicht als alleinige Grundlage für Maßnahmen oder als endgültige Bewertungsmaßnahme durch Lehrkräfte verwendet werden sollte").

Eine zweite offizielle Seite sagt dasselbe mit anderen Worten: Das Modell „may not always be accurate," (auf Deutsch: „ist unter Umständen nicht immer zutreffend"), deshalb „should not be used as the sole basis for adverse actions against a student," (auf Deutsch: „sollte nicht als alleinige Grundlage für nachteilige Maßnahmen gegen eine Schülerin oder einen Schüler verwendet werden") und ob ein Fehlverhalten vorliegt, „takes further scrutiny and human judgment." (auf Deutsch: „erfordert genauere Prüfung und menschliches Urteilsvermögen").

In sämtlichen eigenen Materialien von Turnitin bleibt die Botschaft dieselbe: Die Zahl ist nicht die Entscheidung. Die Entscheidung trifft die Lehrkraft – und der Anbieter schreibt an anderer Stelle darüber, was Lehrende tun sollen, wenn der KI-Anteil hoch ist.

In Turnitins Hinweisen zur Auswertung des Berichts steht es unmissverständlich: Der KI-Score „is not meant to provide definitive answers in isolation." (auf Deutsch: „soll für sich allein genommen keine endgültigen Antworten liefern").

Dieselbe Seite erklärt auch, warum: „More important than any tool is the educator who sees the score and makes decisions balancing this information with their personal knowledge of their students, their work, and institutional policy." (auf Deutsch: „Wichtiger als jedes Werkzeug ist die Lehrkraft, die den Score sieht und Entscheidungen trifft, indem sie diese Information mit ihrer persönlichen Kenntnis der Studierenden, deren Arbeiten und den Vorgaben der Institution abgleicht").

Und am Ende steht, wofür der Wert gedacht ist: „When educators look at the AI writing score and utilize it as a single data point rather than a definitive response, then it is being used as intended." (auf Deutsch: „Wenn Lehrende den KI-Schreib-Score betrachten und ihn als einzelnen Datenpunkt nutzen statt als endgültige Antwort, dann wird er bestimmungsgemäß verwendet"). Dieser Satz umfasst im Grunde die ganze Aufgabe, die mit dem Lesen des Scores verbunden ist.

Turnitin zählt außerdem die Textarten auf, bei denen Fehlalarme häufig sind – wenn also menschliches Schreiben als KI markiert wird: „content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas." (auf Deutsch: „Inhalte ohne große strukturelle Abwechslung, Texte, die sich wörtlich wiederholen, oder Texte, die umformuliert wurden, ohne neue Gedanken zu entwickeln").

Der Satz danach ist der, den man sich merken sollte: „If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated." (auf Deutsch: „Wenn unser Indikator bei einem solchen Text einen höheren Anteil KI-Text anzeigt, raten wir Ihnen, das bei der Betrachtung des angezeigten Prozentwerts zu berücksichtigen").

In der Praxis heißt das: Eine studentische Arbeit, die im Aufbau gleichförmig bleibt, eigene Formulierungen wiederverwendet oder eine Quelle umschreibt, ohne eigene Gedanken hinzuzufügen, kann einen höheren Score tragen, ohne dass der Text tatsächlich KI-generiert ist. Turnitin selbst rät, solche Werte geringer zu gewichten. Das ist auch der Grund, warum Paraphrasieren den KI-Score von Turnitin erhöhen kann statt ihn zu senken.

Ausgangspunkt ist die offizielle Vorgabe: Der Score „should not be used as the sole basis for action." (auf Deutsch: „sollte nicht als alleinige Grundlage für Maßnahmen verwendet werden"). Ein Prozentwert allein ist kein Beweis für ein Fehlverhalten.

Turnitin stellt es selbst so dar: Je mehr Text vorliegt, desto verlässlicher sind die Vorhersagen – und kurze Dokumente sind der schwächste Fall. In den FAQ heißt es zu Dokumenten von nur wenigen hundert Wörtern, „the prediction will be mostly 'all or nothing'." (auf Deutsch: „die Vorhersage ist meistens ‚ganz oder gar nicht'"). Bei kurzen Einreichungen sollte man die Zahl also mit besonderer Vorsicht behandeln.

Wirkt ein Score hoch, schauen Sie auf den Text, nicht nur auf die Zahl: Ist das Geschriebene gleichförmig, wiederholt es sich, oder ist es eine Umschreibung ohne neue Gedanken? Trifft das zu, ist es genau das Muster, das Turnitin anders gewichtet wissen will; wie sich der Aufbau eines Essays auf den KI-Score von Turnitin auswirkt behandelt den ersten dieser drei Punkte. Wirkt ein Score niedrig, denken Sie daran, dass der Bereich von 1 % bis 19 % als Sternchen angezeigt wird und nicht als Zahl (was das Sternchen (*%) beim KI-Score von Turnitin bedeutet) – kein Prozentwert heißt kein starkes Signal, aber auch keine Unbedenklichkeitsbescheinigung.

Für Studierende heißt das konkret: Zu einem Score gehört immer das Urteil der Lehrkraft, er ist kein Schuldspruch. In Turnitins Release Notes steht dieselbe Zeile: Ein KI-Schreib-Score „should not be used as the sole basis for adverse actions against a student." (auf Deutsch: „sollte nicht als alleinige Grundlage für nachteilige Maßnahmen gegen eine Schülerin oder einen Schüler verwendet werden").

Wenn Ihre Lehrkraft den Score zur Sprache bringt, führt das konstruktive Gespräch über den Text selbst – Aufbau, Wiederholungen, Umschreibungen ohne neue Gedanken –, denn genau das sind die Merkmale, die Turnitin als fehleranfällig benennt. Der Score ist ein Hinweis, genauer hinzusehen, keine Feststellung, dass ein Fehlverhalten stattgefunden hat. Für die studentische Seite dieses Gesprächs: markiert, obwohl Sie selbst geschrieben haben: eine Antwort vorbereiten.