Falsi positivi di Turnitin: come segnalarli e cosa fare

Si ha un falso positivo quando Turnitin segnala come generato dall'IA un testo scritto da una persona. La documentazione ammette che può accadere e chiede agli utenti di segnalarlo: «If you find AI written documents that we've missed, or notice authentic student work that we've predicted as AI-generated, please let us know! Your feedback is crucial in enabling us to improve our technology further.» (Se trovate documenti scritti con l'IA che ci sono sfuggiti, oppure notate lavori autentici di studenti che abbiamo classificato come generati dall'IA, fatecelo sapere! Il vostro feedback è fondamentale per permetterci di migliorare ulteriormente la nostra tecnologia.)

Se ti arriva un falso positivo, segnalalo a Turnitin attraverso il suo canale di feedback. Allo stesso tempo, considera il punteggio come un segnale che richiede il giudizio di una persona, non come un verdetto definitivo.

Turnitin fissa una soglia chiara per i falsi positivi. La documentazione afferma: «We strive to maximize the effectiveness of our detector while keeping our false positive rate - incorrectly identifying fully human-written text as AI-generated - under 1% for documents with over 20% of AI writing.» (Ci impegniamo per massimizzare l'efficacia del nostro rilevatore mantenendo il tasso di falsi positivi — cioè il caso in cui un testo scritto interamente da una persona viene scambiato per generato dall'IA — sotto l'1% per i documenti con oltre il 20% di scrittura IA.)

Un obiettivo sotto l'1% è basso, ma non è zero. Per un ateneo che gestisce migliaia di elaborati, anche una frazione di punto percentuale si traduce in studenti in carne e ossa che devono giustificare un lavoro scritto con le proprie mani. Cosa significa un tasso dell'1% di falsi positivi fa questo calcolo su un volume reale di consegne. Ecco perché Turnitin chiede un feedback ed ecco perché il punteggio è pensato per essere valutato da un docente, non per essere applicato in automatico.

Turnitin individua con precisione gli schemi che tendono a innescare i falsi positivi. La documentazione afferma: «Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas.» (A volte i falsi positivi — cioè la segnalazione errata di testi scritti da una persona come generati dall'IA — possono riguardare contenuti con poca varietà strutturale, testi che si ripetono letteralmente oppure testi parafrasati senza sviluppare nuove idee.)

La frase successiva conta altrettanto: «If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated.» (Se il nostro indicatore rileva una quantità più alta di scrittura IA in testi di questo tipo, ti consigliamo di tenerne conto quando leggi la percentuale indicata.)

In altre parole: se per sua natura il tuo testo è strutturalmente uniforme, volutamente ripetitivo o parafrasato a lungo dalle fonti senza aggiungere analisi nuova, è più probabile che il rilevatore lo segnali. Non significa che il testo sia stato generato dall'IA. Significa che ne condivide alcune caratteristiche superficiali, e la percentuale va letta tenendo presente questo. Perché i rilevatori di IA segnalano i temi scritti bene descrive lo stesso effetto dal punto di vista opposto.

Turnitin dice senza giri di parole che il suo rilevatore non è uno strumento disciplinare. La documentazione afferma: «Our AI writing detection model may not always be accurate (it may misidentify human-written, AI-generated, and AI-paraphrased text), so it should not be used as the sole basis for adverse actions against a student.» (Il nostro modello di rilevamento della scrittura IA non sempre è accurato — può classificare male testi scritti da una persona, generati dall'IA o parafrasati dall'IA — e quindi non deve essere usato come unico fondamento per provvedimenti sfavorevoli nei confronti di uno studente.)

La frase successiva rincara la dose: «It takes further scrutiny and human judgment in conjunction with an organization's application of its specific academic policies to determine whether academic misconduct has occurred.» (Per stabilire se vi sia stata una violazione accademica servono un esame più approfondito e il giudizio umano, insieme all'applicazione da parte dell'istituzione delle sue specifiche politiche accademiche.)

È un'indicazione diretta di Turnitin: il punteggio da solo non basta per concludere che vi sia stata una violazione accademica. Serve una persona che esamini l'elaborato, applichi le regole dell'istituzione e si prenda la responsabilità di una valutazione.

La documentazione va oltre nel definire come va usato il punteggio. Afferma: «It is not meant to provide definitive answers in isolation. More important than any tool is the educator who sees the score and makes decisions balancing this information with their personal knowledge of their students, their work, and institutional policy.» (Non ha lo scopo di dare risposte definitive se preso da solo. Più importante di qualsiasi strumento è il docente che legge il punteggio e decide, bilanciando questa informazione con la conoscenza diretta che ha dei suoi studenti, del loro lavoro e delle politiche dell'istituzione.)

La frase successiva riassume l'uso previsto: «When educators look at the AI writing score and utilize it as a single data point rather than a definitive response, then it is being used as intended.» (Quando i docenti guardano il punteggio di scrittura IA e lo usano come singolo dato anziché come risposta definitiva, lo stanno usando nel modo previsto.)

È l'inquadramento che consigliamo di adottare anche noi. La percentuale è uno degli elementi in gioco, non un verdetto. Se insegni, unisci al punteggio la conoscenza che hai della storia di scrittura dello studente, il contesto della consegna e le regole del tuo istituto. Se sei uno studente che ha ricevuto un falso positivo, questo inquadramento è il tuo argomento più solido: è lo strumento stesso a dire che non va trattato come una risposta definitiva. Come fare ricorso contro una segnalazione di IA ingiusta spiega quali prove le università accettano davvero a corredo.

Turnitin chiede attivamente un feedback quando il rilevatore sbaglia. La documentazione dice: «If you find AI written documents that we've missed, or notice authentic student work that we've predicted as AI-generated, please let us know! Your feedback is crucial in enabling us to improve our technology further.» (Se trovate documenti scritti con l'IA che ci sono sfuggiti, oppure notate lavori autentici di studenti che abbiamo classificato come generati dall'IA, fatecelo sapere! Il vostro feedback è fondamentale per permetterci di migliorare ulteriormente la nostra tecnologia.)

Per segnalare un falso positivo passa dal canale di feedback di Turnitin. Allega il documento, la percentuale di scrittura IA rilevata e una breve spiegazione del perché ritieni che il testo segnalato sia stato scritto da una persona. Più il feedback è specifico, più risulta utile per migliorare il modello. Il feedback al fornitore, però, non chiude la tua posizione con il tuo istituto: per quella c'è un percorso a parte, come dimostrare che il tuo lavoro è originale.

Mentre aspetti una risposta o una revisione, concentrati sui passaggi segnalati. Se a far scattare il rilevamento sono state alcune sezioni del tuo elaborato, rivedere proprio quei passaggi per aggiungere varietà strutturale, analisi originale e una formulazione meno ripetitiva può essere utile in caso di nuova consegna. Riscrivere solo i paragrafi segnalati da un report Turnitin descrive nel dettaglio questa revisione più mirata.

Se il tuo report Turnitin ha segnalato passaggi che hai scritto tu, ecco i passi da fare:

1. Segnala il falso positivo a Turnitin attraverso il suo canale di feedback.
2. Rileggi i passaggi segnalati confrontandoli con gli schemi descritti da Turnitin: uniformità strutturale, ripetizioni e parafrasi senza nuove idee.
3. Rivedi le sezioni segnalate per aggiungere varietà e analisi originale.
4. Tratta il punteggio come un singolo dato, non come un verdetto definitivo, esattamente come chiede la documentazione di Turnitin.

I passaggi idonei possono essere rielaborati gratuitamente.