Hai ricevuto una segnalazione di IA? Cosa valutare prima di consegnare in ritardo

Una segnalazione di IA provoca ansia immediata. Ti chiedi se sia il caso di trattenere la consegna e rivedere tutto. Prima di prendere questa decisione, è utile capire cosa dice la documentazione sul punteggio.

Turnitin afferma: «Hence, we must emphasize that the percentage on the AI writing indicator should not be used as the sole basis for action or a definitive grading measure by instructors.» (Dobbiamo quindi sottolineare che la percentuale dell'indicatore di scrittura IA non deve essere usata come unica base per intervenire né come misura di valutazione definitiva da parte dei docenti.)

Su questo punto la documentazione è diretta. La percentuale non è una misura definitiva. Non è l'unica base per intervenire. Se il tuo docente vede una percentuale di IA, la documentazione gli dice di non trattarla come elemento decisivo per il voto finale.

La documentazione prosegue: «It is not meant to provide definitive answers in isolation. More important than any tool is the educator who sees the score and makes decisions balancing this information with their personal knowledge of their students, their work, and institutional policy.» (Non ha lo scopo di fornire risposte definitive in modo isolato. Più importante di qualsiasi strumento è il docente che vede il punteggio e prende decisioni bilanciando questa informazione con la conoscenza personale che ha dei propri studenti, del loro lavoro e delle politiche dell'istituzione.)

Questo significa che il punteggio esiste all'interno di un contesto. Dal tuo docente ci si aspetta che lo bilanci con ciò che sa di te, del tuo lavoro e delle regole del tuo ateneo.

La documentazione specifica come va usato il punteggio.

«When educators look at the AI writing score and utilize it as a single data point rather than a definitive response, then it is being used as intended.» (Quando i docenti guardano il punteggio di scrittura IA e lo usano come singolo dato anziché come risposta definitiva, allora lo stanno usando come previsto.)

Un singolo dato. È l'espressione che Turnitin usa per descrivere il proprio indicatore. Se sei nel panico perché hai visto una percentuale, ricorda che la documentazione stessa lo inquadra come un'informazione, non come una conclusione.

Questo conta quando devi decidere se consegnare in ritardo. Il punteggio non dimostra che il tuo lavoro sia stato generato dall'IA. Indica che alcune parti del testo somigliano a una scrittura generata dall'IA. Dal docente ci si aspetta che valuti questo elemento insieme ad altri fattori. Prima ancora di dare per scontato che il numero sia troppo alto, guarda quale percentuale di IA è considerata accettabile su Turnitin.

Se hai scritto il testo tu stesso e hai ricevuto comunque una segnalazione, la documentazione riconosce che questo può accadere.

«Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas.» (A volte i falsi positivi – cioè il segnalare erroneamente come generato dall'IA un testo scritto da un essere umano – possono riguardare contenuti con scarsa varietà strutturale, testi che si ripetono letteralmente, oppure testi rielaborati senza sviluppare idee nuove.)

Chiediti se il tuo modo di scrivere rientra in una di queste descrizioni. Se il tuo testo è strutturalmente uniforme, se ripete certe frasi o se rielabora le fonti senza aggiungere un'analisi originale, la documentazione dice che in questi casi i falsi positivi sono più probabili.

La documentazione continua: «If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated.» (Se il nostro indicatore mostra una quantità maggiore di scrittura IA in questo tipo di testo, ti consigliamo di tenerne conto quando guardi la percentuale indicata.)

Questo è rilevante per la tua decisione. Se il testo segnalato ha queste caratteristiche, la percentuale potrebbe essere gonfiata. La documentazione stessa consiglia prudenza nell'interpretare il punteggio per questi contenuti.

La lunghezza del tuo documento incide sul funzionamento del rilevamento. Per i testi più brevi, la documentazione descrive un limite specifico.

«In shorter documents where there are only a few hundred words, the prediction will be mostly 'all or nothing' because we're predicting on a single segment without the opportunity to overlap.» (Nei documenti più brevi, dove ci sono solo poche centinaia di parole, la previsione sarà per lo più «tutto o niente», perché effettuiamo la previsione su un singolo segmento senza possibilità di sovrapposizione.)

E: «This means that some text that is a mix of AI-generated and original content could be flagged as entirely AI-generated.» (Questo significa che una parte del testo che è un misto di contenuto generato dall'IA e contenuto originale potrebbe essere segnalata come interamente generata dall'IA.)

Se la tua consegna conta solo poche centinaia di parole, il rilevamento potrebbe non avere abbastanza segmenti per produrre un risultato sfumato. Un documento in parte originale e in parte generato dall'IA potrebbe essere segnalato come interamente generato dall'IA. È un limite documentato dello strumento, non una caratteristica della tua scrittura.

Se stai pensando di consegnare in ritardo un documento breve, vale la pena tenerlo a mente. La percentuale su un documento breve può essere meno precisa che su uno più lungo — al limite ti ritrovi Turnitin che dice che il tuo lavoro è IA al 100%.

Turnitin documenta il proprio obiettivo sui falsi positivi, e la condizione che lo accompagna è importante.

«We strive to maximize the effectiveness of our detector while keeping our false positive rate - incorrectly identifying fully human-written text as AI-generated - under 1% for documents with over 20% of AI writing.» (Ci impegniamo a massimizzare l'efficacia del nostro rilevatore mantenendo il nostro tasso di falsi positivi – cioè l'identificare erroneamente come generato dall'IA un testo interamente scritto da un essere umano – sotto l'1% per i documenti con più del 20% di scrittura IA.)

E: «In other words, we might flag a human-written document as AI-written for one out of every 100 fully-human written documents.» (In altre parole, potremmo segnalare come scritto dall'IA un documento scritto da un essere umano su 100 documenti interamente scritti da esseri umani.)

L'obiettivo è sotto l'1% per i documenti con più del 20% di scrittura IA. Questo significa che l'obiettivo si applica specificamente ai documenti in cui una parte significativa è generata dall'IA. Per i documenti con meno scrittura IA, il comportamento sui falsi positivi può essere diverso.

La documentazione riconosce inoltre che i falsi positivi si verificano, con un ritmo di circa uno ogni 100 documenti interamente scritti da esseri umani. Non è un tasso pari a zero. Se il tuo testo è scritto interamente da te, esiste una possibilità documentata di una segnalazione errata. Cosa significa un tasso di falsi positivi dell'1% quando un'università invia 75.000 elaborati mette un numero sulla frequenza con cui questo capita a qualcuno.

Ecco cosa la documentazione suggerisce di valutare.

Primo: il punteggio non è l'unica base per intervenire. La documentazione lo dice esplicitamente. Una percentuale di IA da sola non determina il tuo voto né l'esito.

Secondo: il punteggio è un singolo dato. È un'informazione che il tuo docente è tenuto a bilanciare con altre conoscenze.

Terzo: controlla se il tuo testo presenta caratteristiche da falso positivo. Se manca di varietà strutturale, se si ripete o se rielabora senza idee nuove, la documentazione riconosce una probabilità più alta di falso positivo.

Quarto: considera la lunghezza del documento. I documenti brevi di poche centinaia di parole scontano una previsione del tipo tutto o niente, che può segnalare un contenuto misto come interamente generato dall'IA.

Quinto: l'obiettivo sui falsi positivi è sotto l'1% per i documenti con più del 20% di scrittura IA. Per un testo interamente scritto da un essere umano, il tasso documentato di falsi positivi è di circa uno su 100.

Prima di decidere di consegnare in ritardo, parla con il tuo docente. Chiedi se può condividere con te il report IA in PDF. La documentazione conferma che i docenti possono scaricarlo e condividerlo. Vedere quali sezioni sono segnalate ti aiuterà a capire cosa riflette davvero la percentuale.

L'obiettivo non è farsi prendere dal panico e riscrivere tutto. L'obiettivo è capire cosa significa il punteggio, quali sono i suoi limiti, e poi prendere una decisione informata. Se devi rivedere il testo, riscrivere solo i paragrafi segnalati da un report Turnitin è la versione che ti costa meno tempo.