Punteggio AI alto su Turnitin: cosa fare adesso

Un punteggio AI alto significa che il modello del rilevatore ha classificato come probabilmente generati dall'IA una quota consistente dei segmenti del tuo testo. Non significa che il rilevatore sia certo che tu abbia usato l'IA, e non significa che il tuo docente debba muoversi basandosi solo su quel numero. Nelle FAQ di Turnitin si legge che la percentuale "should not be used as the sole basis for action or a definitive grading measure by instructors." (non dovrebbe essere usata come unica base per prendere provvedimenti né come criterio di valutazione definitivo da parte dei docenti). Le FAQ elencano anche le caratteristiche del testo che favoriscono i falsi positivi: contenuti con poca varietà strutturale, testi che si ripetono e parafrasi che non introducono idee nuove. Il primo passo è capire che cosa rappresenta il punteggio. Il secondo è guardare quali passaggi sono stati segnalati. Il terzo è decidere se riscriverli, se parlarne con il docente, o fare tutt'e due le cose.

Il punteggio è la somma di classificazioni di probabilità fatte sui singoli segmenti:

"When a paper is submitted to Turnitin, sentences from the submission are extracted and segmented into overlapping sections for prediction analysis. Each segment is classified by the AI detection model and given a value between 0 and 1, denoting the probability of the text being likely human or AI-generated. Each qualifying sentence within these segments inherits the segment's score. Since segments overlap, some sentences may have multiple scores, which are then pooled into a single score. These sentence scores are further aggregated and used to compute the overall document AI writing score." (Quando un elaborato viene inviato a Turnitin, le frasi del testo vengono estratte e divise in sezioni parzialmente sovrapposte, su cui viene eseguita l'analisi predittiva. Ogni sezione è classificata dal modello di rilevamento IA e riceve un valore compreso tra 0 e 1, che indica la probabilità che il testo sia opera di un essere umano o generato dall'IA. Ogni frase idonea contenuta in queste sezioni eredita il punteggio della sezione. Poiché le sezioni si sovrappongono, alcune frasi possono avere più punteggi, che vengono poi riuniti in uno solo. I punteggi così ottenuti vengono ulteriormente aggregati e servono a calcolare il punteggio complessivo di scrittura IA del documento.)

La percentuale indica quale parte del testo idoneo il modello classifica come probabilmente scritta dall'IA. È un dato statistico aggregato, non un giudizio definitivo: il modello non è sempre preciso, e quel numero è un elemento tra gli altri, non un verdetto. Da qui nasce la domanda successiva, quasi ovvia: quale percentuale di IA è accettabile su Turnitin.

Le FAQ elencano le caratteristiche che possono produrre falsi positivi:

"Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas." (A volte i falsi positivi — cioè testi scritti da una persona segnalati per errore come generati dall'IA — riguardano contenuti con poca varietà strutturale, testi che si ripetono alla lettera oppure testi parafrasati senza sviluppare idee nuove.)

E la frase subito dopo: "If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated." (Se il nostro indicatore segnala una quantità maggiore di scrittura IA in testi di questo tipo, ti consigliamo di tenerne conto quando guardi la percentuale indicata.)

Se il tuo testo rientra in qualcuna di queste descrizioni, è possibile che il punteggio alto sia in parte un falso positivo. Le rassegne della letteratura, le sezioni di metodologia e in genere i testi che riassumono o riformulano lavori già esistenti possono avere esattamente questo profilo senza che l'IA c'entri nulla: Turnitin ha segnalato tutta la mia sezione di metodologia è il caso analizzato punto per punto.

L'indicatore IA lo vedono solo docenti e amministratori. Le FAQ lo dicono senza giri di parole: "only instructors and administrators are able to see the indicator." (solo i docenti e gli amministratori possono vedere l'indicatore). C'è però anche questo: "with the PDF download feature, instructors can download and share the AI report with students." (con la funzione di download in PDF, i docenti possono scaricare il report IA e condividerlo con gli studenti). Se il tuo docente ti ha detto che il punteggio IA è alto, chiedigli di passarti il PDF del report. Il report mostra quali passaggi sono stati segnalati, ed è l'informazione che ti serve per decidere cosa fare; come leggere un AI Writing Report di Turnitin spiega che cosa hai davanti una volta che ce l'hai.

Le FAQ sono esplicite:

"Hence, we must emphasize that the percentage on the AI writing indicator should not be used as the sole basis for action or a definitive grading measure by instructors." (È quindi necessario ribadire che la percentuale dell'indicatore di scrittura IA non dovrebbe essere usata come unica base per prendere provvedimenti né come misura di valutazione definitiva da parte dei docenti.)

In altre parole, un punteggio alto non è di per sé un motivo sufficiente per prendere provvedimenti a tuo svantaggio. Se il docente ti contesta quel punteggio, questa indicazione ufficiale ti offre un appiglio per una conversazione costruttiva: puoi spiegare come hai scritto il testo, richiamare le caratteristiche che favoriscono i falsi positivi se ricorrono nel tuo caso e chiedere quali passaggi sono stati segnalati.

Per ricapitolare quello che abbiamo visto:

• Un punteggio AI alto è un aggregato di classificazioni sui singoli segmenti, non un giudizio definitivo.
• Alcuni tipi di testo favoriscono i falsi positivi: poca varietà strutturale, ripetizioni e parafrasi senza idee nuove.
• Il punteggio lo vedono solo i docenti, che però possono condividere con te il PDF del report.
• Le FAQ dicono che il punteggio non dovrebbe essere l'unica base su cui decidere.
• I tuoi prossimi passi: procurati il PDF del report, individua i passaggi segnalati e decidi se riscriverli o se parlarne con il docente.

Se hai il report, importalo e lavora solo sui passaggi che sono stati segnalati. I passaggi che ne hanno i requisiti possono essere rielaborati di nuovo gratuitamente.