Ho rifinito il saggio con Notion o QuillBot e ora viene segnalato come IA

Se hai fatto passare il saggio da un correttore grammaticale ed è stato segnalato come IA, la domanda non è se lo strumento sia «sicuro» in generale. È quale funzione hai usato. Le FAQ di Turnitin rispondono direttamente per un prodotto: le correzioni di ortografia, grammatica e punteggiatura di Grammarly non vengono segnalate «in most cases,» (nella maggior parte dei casi), ma i contenuti prodotti dalle funzioni generative di Grammarly — redazione di bozze, parafrasi, riassunti e altre — «will likely be flagged as AI-generated.» (verranno probabilmente segnalati come generati dall'IA). Per Notion, QuillBot e altri strumenti, Turnitin non pubblica un elenco strumento per strumento. Le FAQ dicono che il rilevatore è stato addestrato e testato per individuare i principali strumenti di parafrasi e di aggiramento, ma che non può rivelare quali. Il confine è chiaro in linea di principio, anche se l'elenco degli strumenti non lo è: le correzioni e la riscrittura generativa sono categorie diverse e il rilevatore le legge in modo diverso.

Le FAQ contengono una risposta dettagliata proprio su Grammarly. Il passaggio rilevante è lungo e ogni clausola conta:

«No. Our detector is not tuned to target Grammarly-generated spelling, grammar, and punctuation modifications to content but rather, other AI content written by LLMs such as GPT-3.5. Based on tests we conducted on human-written documents with no AI-generated content in them, in most cases, changes made by Grammarly (free & premium) and/or other grammar-checking tools were not flagged as AI-written by our detector. Please note that this excludes content generated by Grammarly's generative AI-powered features, including draft generation, paraphrasing, summarizing, and other features. Content produced using these features will likely be flagged as AI-generated by our detector.» (No. Il nostro rilevatore non è tarato per colpire le modifiche di ortografia, grammatica e punteggiatura generate da Grammarly, bensì altri contenuti IA scritti da LLM come GPT-3.5. Sulla base dei test che abbiamo condotto su documenti scritti da esseri umani privi di contenuti generati dall'IA, nella maggior parte dei casi le modifiche apportate da Grammarly (gratuito & premium) e/o da altri strumenti di controllo grammaticale non sono state segnalate come scritte dall'IA dal nostro rilevatore. Ti preghiamo di notare che questo esclude i contenuti generati dalle funzioni di IA generativa di Grammarly, tra cui la redazione di bozze, la parafrasi, il riassunto e altre funzioni. I contenuti prodotti con queste funzioni verranno probabilmente segnalati come generati dall'IA dal nostro rilevatore.)

Leggi quella frase in due metà. La prima metà è un'esenzione: il rilevatore non è tarato per individuare correzioni di ortografia, grammatica e punteggiatura, e nei casi testati non sono state segnalate. La precisazione «in most cases» (nella maggior parte dei casi) fa un lavoro reale, perché significa che l'esenzione non è una garanzia. La seconda metà è il confine: le funzioni generative sono un'altra categoria e i contenuti che ne derivano verranno probabilmente segnalati. Abbiamo analizzato l'intero passaggio in Turnitin rileva Grammarly come scrittura IA?.

Grammarly è l'unico strumento che le FAQ di Turnitin citano per nome. Per Notion, QuillBot e qualsiasi altro non esiste una dichiarazione pubblicata. Quello che le FAQ dicono è questo:

«Our AI writing detector has been trained and tested to detect leading paraphraser and bypasser tools. However, to safeguard the integrity of our solution and its effectiveness in maintaining academic honesty, we're unable to disclose the names of these tools.» (Il nostro rilevatore di scrittura IA è stato addestrato e testato per individuare i principali strumenti di parafrasi e di aggiramento. Tuttavia, per tutelare l'integrità della nostra soluzione e la sua efficacia nel preservare l'onestà accademica, non possiamo divulgare i nomi di questi strumenti.)

Non possiamo e non vogliamo dirti che uno strumento specifico sia sicuro o rischioso, perché Turnitin non pubblica l'elenco e noi non facciamo affermazioni su ciò che viene rilevato. Quello che possiamo dire è che le FAQ su Grammarly stabiliscono una cornice: da una parte le correzioni (ortografia, grammatica, punteggiatura), dall'altra le operazioni generative (scrivere bozze, parafrasare, riassumere). Se lo strumento che hai usato ha entrambi i tipi di funzioni, conta più quale pulsante hai premuto che quale app hai aperto. Per lo stesso motivo anche Turnitin rileva gli umanizzatori di IA? non ha una risposta a forma di elenco.

C'è un'insidia. Le FAQ elencano il testo che è stato «paraphrased without developing new ideas» (parafrasato senza sviluppare nuove idee) tra i contenuti che possono rientrare nei falsi positivi. Il passaggio completo:

«Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas.» (A volte i falsi positivi — cioè testi scritti da esseri umani segnalati erroneamente come generati dall'IA — possono includere contenuti con poca variabilità strutturale, testi che si ripetono letteralmente o testi che sono stati parafrasati senza sviluppare nuove idee.)

E la frase successiva: «If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated.» (Se il nostro indicatore mostra una quantità maggiore di scrittura IA in un testo di questo tipo, ti consigliamo di tenerne conto quando guardi la percentuale indicata.)

Questo significa che uno strumento di parafrasi può creare un doppio problema. Primo: se è tra gli strumenti che Turnitin è stato addestrato a rilevare, il suo output può essere segnalato direttamente. Secondo: anche quando non viene rilevata l'impronta di uno strumento specifico, il testo risultante può corrispondere al profilo di scrittura attorno al quale si concentrano i falsi positivi: struttura uniforme, ripetizione letterale o parafrasi che mescola le parole senza aggiungere sostanza. Il primo rischio è il rilevamento. Il secondo è la somiglianza.

Un elemento che aggiunge confusione è che il punteggio IA e il punteggio di similarità sono indipendenti. Turnitin afferma: «The Similarity score and the AI writing detection percentage are completely independent and do not influence each other.» (Il punteggio di similarità e la percentuale di rilevamento della scrittura IA sono completamente indipendenti e non si influenzano a vicenda.) Uno strumento di parafrasi può abbassare il punteggio di similarità, perché il testo non corrisponde più parola per parola alle fonti esistenti, e allo stesso tempo alzare il punteggio IA, perché il risultato ora somiglia a un testo generato dall'IA o parafrasato. Questi due movimenti non sono in contraddizione. Vengono da due sistemi separati che leggono segnali diversi.

Abbiamo visto questo schema abbastanza spesso da dedicargli un articolo: cosa succede quando la parafrasi abbassa la similarità ma alza il punteggio IA.

Per riassumere quanto abbiamo visto:

• Le correzioni di ortografia, grammatica e punteggiatura di Grammarly non vengono segnalate «in most cases,» (nella maggior parte dei casi), ma le sue funzioni generative — parafrasi, riassunti, redazione di bozze — probabilmente sì.
• Turnitin non rivela quali altri strumenti rileva, quindi nessuno può darti una «lista sicura» verificata.
• La funzione usata conta più del nome dell'app: correggere e riscrivere in modo generativo sono categorie diverse.
• Il testo parafrasato che non sviluppa nuove idee è nella stessa lista Turnitin dei contenuti inclini ai falsi positivi.
• Il punteggio IA e il punteggio di similarità sono indipendenti, quindi uno strumento di parafrasi può abbassarne uno e alzarne un altro.

Se il tuo saggio è già segnalato, la domanda utile non è «se la colpa è dello strumento», ma «which passages are flagged and why.» (quali passaggi sono segnalati e perché). Importa il tuo report Turnitin e lavora sui passaggi specifici che sono stati segnalati. I passaggi che soddisfano i requisiti possono essere rielaborati gratuitamente.