Riscrivere solo i paragrafi segnalati dal report Turnitin

Sviluppo HumanPen, che fa esattamente quello che sto per descrivere, quindi questa non è una panoramica imparziale. Vale comunque la pena spiegare il meccanismo, anche se preferisci farlo a mano.

Uno strumento di riscrittura completa costa poco da eseguire ma molto da verificare.

Il costo che ricade realmente su di te è la verifica, e questa scala in base a ciò che è cambiato, non a ciò che era problematico. Ovunque atterri una riscrittura, devi ora confermare che i numeri siano sopravvissuti, che la terminologia sia rimasta coerente con la sezione precedente, che la citazione nel testo sia ancora collegata all'affermazione che supporta, che "vedi Tabella 2" indichi ancora la Tabella 2, e che una precisazione non sia stata trasformata in un'affermazione assoluta. Che "associazione" torni come "causalità" è ciò che mi spaventa di più, perché la frase continua a sembrare perfettamente valida sulla pagina.

Su un paragrafo che nessuno ha toccato, non controlli nulla.

Prendiamo l'esempio che usiamo nel nostro documento di confronto: un articolo di 10.000 parole con 2.800 parole segnalate. Riscrivi tutto e rileggi 10.000 parole per la stessa correzione di base. Le altre 7.200 sono quelle su cui non avevi motivo di dubitare.

Un secondo costo emerge dopo. Una volta che un passaggio di riscrittura completa ha modificato i paragrafi che erano già puliti, il report successivo non è più confrontabile con il primo. Se qualcosa viene segnalato di nuovo, non puoi dire se lo era già prima, perché il testo sottostante non è più quello che il primo report ha analizzato. La riscrittura selettiva mantiene il testo non segnalato come controllo.

La documentazione di Turnitin è chiara: l'indicatore di scrittura AI e il punteggio di similarità sono indipendenti l'uno dall'altro, e le evidenziazioni della scrittura AI non appaiono affatto nel Similarity Report (Using the AI Writing Report). Un Similarity Report evidenzia sovrapposizioni con fonti esistenti. Se lo si usa in un flusso di lavoro guidato dal report, si finisce per lavorare su passaggi che nessuno ha classificato come scrittura AI. HumanPen non tratta un Similarity Report come se fosse un AI Writing Report.

Altre due cose che cambiano il modo di leggere il report:

• Sotto il 20%, non c'è numero. Turnitin mostra un asterisco al posto della percentuale per punteggi tra 1 e 19, attribuendo questo a un tasso più alto di falsi positivi in quella fascia. Quindi la percentuale non è sempre qualcosa che hai. Le evidenziazioni sì.
• La percentuale non è una quota dell'intero documento. Turnitin analizza solo quello che chiama "qualifying text", cioè prosa articolata in frasi grammaticalmente complete. Elenchi, punti elenco e altre strutture non frasali sono esclusi dall'analisi. Le parole testuali di Turnitin su ciò che ne consegue sono "a document containing several different writing types would result in a disparity between the percentage and the highlights". Quindi evidenziazioni e percentuale non sempre coincidono, e quanto divergono dipende da quanto del tuo documento non è prosa.

I passaggi evidenziati, non il numero, sono la parte del report su cui si può agire.

La riscrittura è la metà più facile.

1. Estrapolare le evidenziazioni da un documento che non è mai stato pensato per essere analizzato. In Turnitin, solo docenti e amministratori vedono gli indicatori di scrittura AI. I docenti possono scaricare un PDF del report da condividere con lo studente, quindi ciò che raggiunge un autore è tipicamente un PDF, non un feed di dati. E un report in PDF è un rendering. Il suo livello di testo è composto da sequenze di glifi posizionate in righe, e l'evidenziazione è una forma colorata disegnata sopra quel layout. Nulla nel file dice "questi caratteri sono segnalati". Recuperarlo significa intersecare la geometria delle evidenziazioni con la geometria del livello di testo e leggere quali glifi cadono all'interno.
2. Normalizzare ciò che ne esce, perché non è il testo che hai scritto. Le parole si spezzano a capo con trattini che non c'erano nell'originale. Le legature tornano come un glifo unico dove avevi digitato due lettere. Gli apostrofi dritti tornano ricurvi. Testatine, numeri di pagina e piè di pagina si intrecciano nel flusso estratto, quindi un paragrafo può arrivare con il nome della rivista incorporato. Ciascuno di questi elementi sconfigge la corrispondenza esatta di stringhe, e l'unico sintomo è un matcher che silenziosamente non restituisce nulla.
3. Far corrispondere al file sorgente con la stessa normalizzazione su entrambi i lati. Stai confrontando un rendering con perdita di informazione di un paragrafo contro il paragrafo stesso, quindi questa è per costruzione una corrispondenza approssimativa, e una corrispondenza approssimativa è qualcosa che devi mostrare a qualcuno.
4. Espandere la corrispondenza all'intero paragrafo. Le evidenziazioni non sono tenute ad allinearsi ai paragrafi, e il caso che decide il design è quello in cui non lo fanno: il passaggio inizia da qualche parte dentro il paragrafo e si ferma a metà proposizione. Se riscrivi esattamente i caratteri evidenziati, metà del paragrafo torna con un registro diverso dall'altra metà, e le frasi restano appoggiate a pronomi e termini definiti che sono stati introdotti nella parte che nessuno ha toccato. Per questo il paragrafo è l'unità di riscrittura minima. Un'evidenziazione parziale viene espansa al paragrafo completo, e quella lista espansa è ciò che viene mostrato all'autore perché la confermi.
5. Riscrivere sul posto, dentro il file. Non estrarre, riscrivere, reincollare. Ciascun paragrafo riscritto torna dove era, e un insieme protetto viene lasciato intatto durante il processo: marcatori di citazione, voci bibliografiche, formule, codice, didascalie, numerazione delle figure, note a piè di pagina, celle di tabelle, campi di riferimento incrociato e indice.

Il passaggio 3 è euristico, e le euristiche a volte sbagliano.

Una frase evidenziata che appare due volte nel documento, come succede con il boilerplate dei metodi, può corrispondere all'istanza sbagliata. Un paragrafo che hai modificato dopo aver generato il report potrebbe non corrispondere affatto. Una didascalia o una cella di tabella può sembrare prosa del corpo. Se lo strumento agisce su una corrispondenza errata in silenzio, riscrive un paragrafo che il report non ha mai segnalato e non lo scopri mai, che è esattamente ciò che questo approccio esiste per evitare.

Quindi i paragrafi corrispondenti vengono mostrati prima che il lavoro inizi. Puoi aggiungere alla lista, togliere da essa, e qualsiasi cosa tu non abbia confermato resta fuori dall'ambito. L'ambito è anche prezzo, dato che la fatturazione segue le parole effettivamente riscritte, quindi quella schermata è anche la stima.

La modalità guidata dal report ha senso solo quando hai davvero un report. Senza, elaborare l'intero documento o scegliere i passaggi da soli è la risposta onesta, e il nostro strumento fa entrambe le cose.

L'output richiede una lettura umana. La riscrittura automatica produce dettagli che necessitano correzione, e rifiutarsi di iniettare errori grammaticali o ortografici deliberati non rende il risultato pronto per la sottomissione di per sé.

La corrispondenza viene eseguita contro il file che carichi, quindi se hai modificato pesantemente da quando il report è stato generato, aspettati meno corrispondenze e un ambito proposto più breve. Se l'ambito che ti viene mostrato sembra più scarso rispetto alle evidenziazioni nel tuo report, di solito è questo il motivo.

Non c'è nessun confronto di punteggi di rilevamento da nessuna parte in questo articolo, di proposito. Turnitin dice chiaramente che non pubblicherà i nomi degli strumenti di parafrasi e bypass che il suo rilevatore copre, perché una lista pubblica aiuterebbe le persone a eluderlo (AI writing detection FAQs). Il che significa che nessuno fuori da Turnitin può verificare un'affermazione "abbiamo battuto il rilevatore X", quindi non ho intenzione di farne una. Turnitin dice anche che il suo indicatore non dovrebbe essere l'unica base per azioni contro uno studente, cosa che vale la pena tenere a mente quando un numero torna più alto di quanto ti aspettavi.

Se un nuovo report segnala ancora dei passaggi, i risultati idonei possono continuare ad abbassare l'AI gratuitamente. Questo è supporto, non una promessa su dove finirà il numero.

Esiste uno strumento che riscrive solo i paragrafi segnalati in un report Turnitin? Sì. HumanPen importa un AI Writing Report di Turnitin o iThenticate, fa corrispondere i passaggi evidenziati al tuo documento sorgente, ti mostra i paragrafi corrispondenti e riscrive solo quelli che confermi. Il file torna nel formato con cui è entrato.

Posso farlo semplicemente a mano? Sì, e per cinque o sei paragrafi segnalati è assolutamente ragionevole. Apri il report accanto al documento, trova ogni evidenziazione, riscrivi quel paragrafo da solo, lascia stare il resto. Ottieni lo stesso vantaggio di ambito. Ciò che uno strumento ti compra è la corrispondenza su un PDF lungo e il non dover riassemblare il file dopo.

Questo funziona con iThenticate oltre che con Turnitin? Sì. Entrambi producono un AI Writing Report ed entrambi sono supportati. Ciò che non è intercambiabile è il Similarity Report, che misura qualcosa di completamente diverso.

Come farei a testare se uno strumento fa davvero questo? Trova un'evidenziazione nel tuo report che inizia nel mezzo di una frase. Dai il report allo strumento e guarda l'ambito che propone. Dovrebbe contenere quell'intero paragrafo, e non dovrebbe contenere il paragrafo prima o dopo a meno che anche quelli non fossero segnati. Uno strumento che propone esattamente il frammento evidenziato ti restituirà un paragrafo scritto da due persone, e uno strumento che propone l'intera sezione non sta davvero lavorando dal report.