Si può davvero ottenere lo 0% di IA su Turnitin?

Un indicatore di scrittura IA di Turnitin attuale può mostrare 0%. Dall’8 luglio 2024 lo zero è l’unico numero esatto che compare sotto il venti: i risultati dall’1% al 19% vengono resi come un asterisco, senza percentuale e senza evidenziazioni. Fanno eccezione i rapporti generati prima di questa modifica della visualizzazione; Turnitin dice che possono ancora mostrare un punteggio numerico inferiore al 20%. L’indicatore non è visibile agli studenti. Quindi ciò che le persone inseguono quando dicono «0% IA» — un numero basso da poter guardare, prendere come obiettivo e confermare più volte — non è uno stato che normalmente controlli o osservi. Compare sullo schermo di qualcun altro, sotto una regola di visualizzazione di cui conta la data.

Il resto dell’articolo spiega cosa sono questi quattro, perché lo spazio tra zero e venti non ha gradazioni e cosa uno 0% risolverebbe — e cosa no — se qualcuno te ne mostrasse uno.

L’attuale FAQ di Turnitin ha una breve sezione intitolata "What do the different indicators mean?" (cosa significano i diversi indicatori), che elenca ciò che compare accanto a un elaborato al termine dell’elaborazione. Sono quattro stati, e le differenze tra loro contano più delle differenze tra due numeri.

Le ultime due righe non sono affatto risultati: in un caso Turnitin si rifiuta di elaborare il file, nell’altro ci prova e fallisce. Leggi insieme le prime due e la forma della scala attuale diventa evidente. Dai venti in su, l’indicatore si comporta come una misurazione: un numero e passaggi evidenziati che puoi andare a guardare. Sotto il venti si comporta come un interruttore. Lo zero è una posizione. La fascia dall’1% al 19% è l’altra.

Un rapporto generato secondo la regola in vigore dall’8 luglio 2024 non mostrerà 4%, 11% o 19%: mostra l’asterisco al loro posto. Un rapporto più vecchio può conservare uno di quei numeri, ed è per questo che la data di generazione va messa accanto a ogni punteggio che citi. Su un rapporto attuale, «voglio far scendere il mio punteggio a qualcosa di piccolo» descrive un risultato che l’interfaccia non può graduare per te, e «voglio lo 0%» indica l’unico numero esatto sotto il venti che mostrerà.

La regola è pubblicata, e lo è anche la ragione:

"False positives (incorrectly flagging human-written text as AI-generated) are a possibility in AI models. To avoid potential incidence of false positives, no score or highlights are attributed for AI detection scores in the 1% to 19% range. When AI is detected below the 20% threshold in the report, it is now indicated with an asterisk (*%) and no percentage is attributed." (I falsi positivi — segnalare per errore come generato dall’IA un testo scritto da un essere umano — sono una possibilità nei modelli di IA. Per evitare il possibile verificarsi di falsi positivi, per i punteggi di rilevamento IA compresi tra 1% e 19% non vengono attribuiti né punteggio né evidenziazioni. Quando nel rapporto viene rilevata IA sotto la soglia del 20%, ora viene indicata con un asterisco (*%) e non viene attribuita alcuna percentuale.)

Questo confine elimina due tipi di informazione, e il secondo riceve meno attenzione di quanta ne meriti. Sparisce il numero, che è la parte che tutti notano. Spariscono anche le evidenziazioni. Sotto la soglia, il rapporto non ti dà alcun passaggio da ispezionare né alcuna posizione a livello di frase per il risultato.

Porta questo ragionamento fino a una revisione sotto la regola di visualizzazione attuale. Supponiamo che il risultato sottostante sia passato dal 17% al 3%. Entrambi i rapporti mostrano un asterisco. Stesso simbolo, stessa assenza di evidenziazioni, tutto uguale. Il lavoro c’è stato; l’interfaccia non ha il vocabolario per riferirlo. Chiunque affermi che un rapporto attuale sia passato «dal 15% al 4%» sta fornendo due cifre esatte che il rapporto non ha mostrato. Un rapporto datato prima dell’8 luglio 2024 è l’eccezione, non la prova che la regola attuale funzioni diversamente.

Niente di tutto questo è una regola sulla cattiva condotta. È una decisione su ciò che il fornitore mette su uno schermo; il momento in cui una scuola esamina un elaborato deriva dalla politica di quella scuola. Ne abbiamo parlato in il 20% di IA è troppo alto?.

Questo fa sì che «posso arrivare allo 0%?» sia una domanda sull’accesso prima che sulla difficoltà. La FAQ lo spiega in due frasi, e la seconda è quella che di solito viene lasciata cadere:

"The AI writing detection indicator and report are not visible to students. However, with the PDF download feature, instructors can download and share the AI report with students." (L’indicatore e il rapporto di rilevamento della scrittura IA non sono visibili agli studenti. Tuttavia, con la funzione di download in PDF, i docenti possono scaricare il rapporto IA e condividerlo con gli studenti.)

Altrove sulla stessa pagina: "only instructors and administrators are able to see the indicator." (solo i docenti e gli amministratori possono vedere l’indicatore). L’unico modo in cui il tuo risultato IA ti raggiunge passa quindi da qualcun altro che decide di scaricare un PDF e inviartelo. È una strada reale — molti studenti hanno visto il loro rapporto —, ma non è un quadrante che puoi consultare.

Il che significa che il ciclo che quasi tutti i consigli danno per scontato non esiste. Inviare, guardare il punteggio, rivedere, guardare di nuovo: i due passaggi che implicano il guardare non dipendono da te. Ciò che ottieni invece è un verdetto unico, più tardi, magari riferito, magari come uno screenshot senza data. E quando un tutor dice che l’indicatore «non compare», questo ha una sua serie di cause documentate che non hanno nulla a che fare con il tuo file. Le abbiamo raccolte in perché il tuo punteggio IA è mancante o incoerente.

Supponiamo che tu ne ottenga uno comunque: un docente scarica il PDF, te lo consegna, e indica 0%. Ecco cosa dice Turnitin sulla decisione di progettazione dietro quel numero:

"In order to maintain this low rate of 1% for false positives, there is a chance that we might miss some AI written text in a document. We're comfortable with that since we do not want to incorrectly highlight human-written text as AI-written. For example, if we identify that 50% of a document is likely written by an AI tool, it could contain as much as 65% AI writing." (Per mantenere questo basso tasso dell’1% di falsi positivi, c’è la possibilità che ci sfugga una parte del testo scritto con l’IA in un documento. Per noi va bene così, perché non vogliamo segnalare per errore un testo scritto da un essere umano come scritto dall’IA. Per esempio, se identifichiamo che il 50% di un documento è probabilmente scritto da uno strumento di IA, potrebbe contenere fino al 65% di scrittura IA.)

È un fornitore che dice, con le sue parole, che preferirebbe mancare del testo IA piuttosto che segnalare testo umano. Ne derivano tre conseguenze, e vanno in entrambe le direzioni:

• Uno 0% non certifica che nulla sia stato realizzato con l’aiuto dell’IA. Lo strumento è tarato per segnalare meno del dovuto. Uno zero è compatibile con un elaborato pulito, ma anche con un elaborato che il modello non ha individuato, e il rapporto non contiene nulla che distingua i due casi.
• Uno 0% non è un’affermazione su tutto il tuo file. La percentuale è calcolata sulla prosa idonea. Un documento fatto soprattutto di elenchi, tabelle numeriche e una sezione di riferimenti bibliografici è stato valutato comparativamente poco, quindi il suo zero copre meno terreno di quanto sembri. I paragrafi interi dentro le celle di una tabella sono un caso a parte: Turnitin dice di elaborare la prosa lunga nelle tabelle. Il problema del denominatore è l’argomento di come leggere un rapporto di scrittura IA di Turnitin.
• Uno 0% non è una prova che puoi portare in una conversazione. Turnitin dice esplicitamente che non stabilisce l’esistenza di una cattiva condotta e che fornisce dati con cui i docenti decidono. Ciò che risponde davvero a «l’hai scritto tu?» sono le bozze, le fonti, gli appunti e la tua capacità di parlare del lavoro. Questo materiale è elencato in segnalato, ma l’hai scritto tu.

Uno zero è l’output di un classificatore, eseguito su una parte di un documento, in un giorno, sotto una versione del modello. Vale la pena averlo. Risolve meno di quanto suggerisca l’espressione «0% IA».

Un numero mancante non è automaticamente uno zero. A volte non c’è alcun risultato; a volte c’è un risultato diverso da zero il cui numero esatto viene trattenuto; e a volte un file breve o povero di prosa produce un risultato reale su un denominatore ristretto. Questi casi hanno bisogno di nomi diversi.

• Doppio trattino grigio o errore di elaborazione: nessun risultato. Meno di 300 parole di prosa lunga, più di 30.000 parole, una lingua o un tipo di file non supportato possono rendere il file non idoneo; uno stato di errore separato significa che Turnitin è fallito durante l’elaborazione. Nessuno dei due è un punteggio pulito, e nessuno dei due dovrebbe essere riportato come 0%. Tutti i dettagli in Turnitin può controllare una tesi intera?.
• Asterisco: un risultato sopra lo zero il cui numero è nascosto. Nei rapporti generati secondo la regola attuale, significa che l’intervallo rilevato va dall’1% al 19%. La percentuale e le evidenziazioni vengono trattenute per il rischio di falsi positivi. Non è vuoto, anche se non ti dà alcuna posizione da cui partire.
• Documento breve o povero di prosa: comunque potenzialmente un risultato reale. Il materiale non in prosa restringe il denominatore; non rimuove il punteggio di per sé. Se restano almeno 300 parole di prosa lunga, il file può ancora generare un rapporto. In un documento di poche centinaia di parole, Turnitin dice che la previsione è per lo più "all or nothing" (tutto o niente), perché c’è un solo segmento e nessuna sovrapposizione da mediare. È un avvertimento sui risultati estremi, non un terzo stato vuoto. La fonte non esclude il lato dello zero, e lo zero rientra nell’intervallo di successo pubblicato da Turnitin.

Il test pratico è semplice. Un doppio trattino o un errore significa che non c’è punteggio. Un asterisco significa che c’è un punteggio diverso da zero che non viene mostrato. Uno 0% blu è un output reale del classificatore, anche quando il file era breve o il denominatore idoneo era ristretto. I tre non dovrebbero essere ridotti a un’unica idea di «nulla rilevato».

Rovescia tutto questo e salta fuori qualcosa di leggermente strano. I rapporti che allarmano le persone — quelli da venti in su — sono gli unici ad avere informazioni sufficienti per agire. Hanno una cifra e passaggi evidenziati. Nella fascia attuale dall’1% al 19% non hai né l’una né gli altri; allo 0% hai la cifra ma nessun passaggio evidenziato da rivedere.

Lo strumento HumanPen è costruito da quella parte della linea. Carichi il DOCX insieme al rapporto IA di Turnitin o iThenticate e i passaggi evidenziati diventano il perimetro. Viene riscritto solo quel testo; tutto il resto resta intatto. Il costo si basa sul numero di parole riscritte, non sulla lunghezza del file caricato.

HumanPen offre anche assistenza di follow-up gratuita: i risultati idonei possono continuare a ridurre l’IA gratuitamente. Questa assistenza non promette un risultato particolare del rilevatore.

Niente di tutto questo è una previsione. La nostra stessa FAQ su quella pagina lo dice chiaramente: "Detectors keep changing, so no one can honestly promise a fixed outcome." (i rilevatori cambiano continuamente, quindi nessuno può promettere onestamente un risultato fisso). La percentuale a un nuovo controllo è sconosciuta; citarne una in anticipo sarebbe un’invenzione. Turnitin non ha mai detto come una data modifica dovrebbe spostare un punteggio, e la regola di visualizzazione descritta sopra significa che, sotto la soglia, nessuno potrebbe comunque verificare una tale affermazione. Quello che possiamo dirti è quali parole vengono toccate e quali vengono fatturate.

Un rapporto di scrittura IA di Turnitin può davvero mostrare 0%? Sì. La FAQ di Turnitin descrive lo stato di successo come un indicatore blu con una percentuale tra 0 e 100, e lo zero rientra in quell’intervallo. L’avvertenza sulla data riguarda l’1% al 19%: i rapporti più vecchi possono conservare quei numeri, mentre quelli attuali mostrano un asterisco.

Un asterisco è la stessa cosa dello 0%? No. Su un rapporto attuale, l’asterisco significa che è stata rilevata IA nell’intervallo tra 1% e 19%, e Turnitin trattiene il numero e le evidenziazioni in quella fascia a causa dei falsi positivi. È un risultato diverso da zero che l’interfaccia rinuncia a quantificare.

Posso controllare il mio punteggio IA prima del mio tutor? Non tramite l’indicatore. Turnitin afferma che l’indicatore e il rapporto di rilevamento della scrittura IA non sono visibili agli studenti e che i docenti possono scaricare il rapporto come PDF e condividerlo. Tutto ciò che vedi, lo vedi perché qualcuno ha scelto di mostrartelo.

Se il mio rapporto dice 0%, sono al sicuro? È un buon risultato e non è un certificato. Turnitin dice di accettare di mancare una parte di scrittura IA pur di mantenere basso il tasso di falsi positivi, e dice che il punteggio IA non determina la cattiva condotta. Entrambe le metà di questo contano.

Riscrivere mi porterà allo 0%? La percentuale a un controllo futuro non può essere promessa. Uno strumento che ne indica una sta citando un risultato che non possiede. Ciò che una riscrittura guidata dal rapporto decide è quali passaggi vengono cambiati e quali restano esattamente come li hai scritti.