Perché Turnitin mi segnala riferimenti e citazioni? Cosa coprono davvero le esclusioni

Le esclusioni su cui tutti contano descrivono come viene prodotto un report. Non sono proprietà del tuo file. È questa distinzione a decidere se le voci bibliografiche evidenziate sono un mistero o una data, ed è sempre lei a decidere quale dei due numeri valga la pena discutere.

Team HumanPen

· 10 min di lettura

La risposta breve

L'AI Writing Report di Turnitin esclude le bibliografie e analizza solo la prosa scritta in frasi grammaticali complete: il tuo elenco di riferimenti quindi non alza la tua percentuale IA e non è disponibile per diluirla. Il colore che compare su una bibliografia appartiene quasi sempre al Similarity Report, e lì una voce bibliografica che corrisponde è esattamente ciò che uno stile di citazione condiviso deve produrre.

Restano così tre domande più strette, che la risposta abituale salta. Perché alcuni report IA hanno comunque del colore sulle voci di riferimento. Se una bibliografia annotata sia lo stesso caso di un semplice elenco di riferimenti. E chi, se il colore sta dalla parte della similarità, abbia davvero in mano il comando che lo cambierebbe.

Il filo che attraversa tutte e tre è che queste esclusioni non sono fatti sul tuo documento. Sono passaggi di come un report viene costruito, applicati nel momento in cui viene costruito. Cambi il momento e cambi il report, senza toccare una sola parola del file.

L'esclusione è arrivata come correzione di un bug, e i report esistenti non sono stati rielaborati

La pagina di Turnitin sul modello di rilevamento della scrittura IA riporta note di rilascio datate. La voce del 9 agosto 2023 dice:

"We have fixed a bug that was occasionally highlighting AI writing within references listed in a bibliography. Bibliographies are now excluded when processing the AI writing report." (Abbiamo corretto un bug che a volte evidenziava scrittura IA all'interno dei riferimenti elencati in una bibliografia. Le bibliografie ora vengono escluse durante l'elaborazione dell'AI Writing Report.)

La frase subito dopo è quella che viene sempre lasciata fuori quando questa nota viene citata: "Resubmit to reprocess existing submissions that contain highlighted reference sections." (Invia di nuovo per rielaborare le consegne esistenti che contengono sezioni di riferimenti evidenziate.) Quindi l'esclusione viene applicata mentre un report è in produzione. Un report che esisteva già il 9 agosto 2023 ha mantenuto le evidenziazioni che aveva, ed è rimasto così finché qualcuno non ha inviato di nuovo l'elaborato.

La stessa nota ha trattato le tabelle nella stessa forma. "We are now able to process long-form prose text in tables" (Ora siamo in grado di elaborare la prosa lunga nelle tabelle), seguita da "Resubmit to reprocess existing submissions that contain tables." (Invia di nuovo per rielaborare le consegne esistenti che contengono tabelle.) Due cambiamenti, entrambi condizionati a un nuovo invio che nessuno esegue automaticamente.

Per la maggior parte delle persone che hanno in mano un report generato quest'anno, niente di tutto questo spiega nulla. A cosa serve, invece, è all'abitudine che dovrebbe installare: prima di provare a spiegare ciò che un report mostra, scopri quando è stato prodotto, perché le regole con cui è stato prodotto sono le regole di quella data. Due report sullo stesso file, generati a un anno di distanza, non sono due letture di una stessa misurazione. La versione generale di questo l'abbiamo smontata in confrontare due report Turnitin dopo un nuovo controllo.

Spiega anche perché tanti consigli che circolano sulle bibliografie segnalate suonano sicuri e datati allo stesso tempo. Molti sono stati scritti guardando screenshot del 2023.

Il tuo elenco di riferimenti non sta in nessuna delle due metà della percentuale IA

Due domande arrivano di continuo e hanno una sola risposta. La mia bibliografia ha fatto salire la mia percentuale IA? E una bibliografia più lunga la farebbe scendere?

Turnitin chiama testo idoneo ciò che il modello prende in esame, e nelle sue FAQ sul rilevamento dice che "only analyze blocks of text that are written in standard grammatical sentences and do not include other types of writing such as lists, bullet points (short non-sentence structures), or other non-sentence structures" (analizza solo blocchi di testo scritti in frasi grammaticali standard e che non includono altri tipi di scrittura come elenchi, punti elenco - strutture brevi che non sono frasi - o altre strutture che non sono frasi), con la conseguenza indicata nella frase successiva: "This percentage is not necessarily the percentage of the entire submission." (Questa percentuale non è necessariamente la percentuale dell'intera consegna.) Una voce bibliografica non è una frase grammaticale standard, e le bibliografie vengono comunque rimosse prima dell'elaborazione. Quindi l'elenco di riferimenti non sta né al numeratore né al denominatore.

Questo elimina due piani in una volta. Cancellare i riferimenti prima della consegna non cambia ciò che il report analizza, e fa consegnare un elaborato incompleto per risolvere un problema che non avevi. Gonfiare la bibliografia non diluisce niente, perché la diluizione richiede che le parole aggiunte stiano nel denominatore, e queste non ci stanno.

Se vuoi vedere qual è davvero il denominatore in un documento pieno di tabelle ed elenchi, come leggere un AI Writing Report di Turnitin segue un esempio numerico passo per passo.

"Escluso dall'elaborazione" e "non rilevato in modo affidabile" sono due affermazioni diverse

La parola bibliografia sta facendo molto lavoro in tutto questo, e le pagine stesse di Turnitin contengono due affermazioni separate sul materiale a forma di riferimento che le persone tendono a fondere in una sola.

Un articolo di assistenza di Turnitin dice: "The model does not reliably detect AI-generated text in the form of non-prose, such as poetry, scripts, or code, nor does it detect short-form/unconventional writing such as bullet points, tables, or annotated bibliographies." (Il modello non rileva in modo affidabile il testo generato dall'IA in forma di non prosa, come poesia, sceneggiature o codice, e non rileva nemmeno la scrittura breve o non convenzionale come punti elenco, tabelle o bibliografie annotate.)

Leggi questo accanto alla nota di rilascio. La nota descrive una regola di elaborazione: le bibliografie vengono tolte prima che il modello venga eseguito. L'articolo di assistenza descrive un limite di affidabilità: per certi tipi di scrittura, il risultato del modello non è qualcosa dietro cui Turnitin ci mette la firma. Non sono la stessa garanzia, e la seconda è molto più debole.

La distinzione morde più forte sulle bibliografie annotate, perché le annotazioni sono frasi di prosa che hai scritto tu, messe sotto voci che non hai scritto tu. Se la tua bibliografia annotata torna con del colore sopra, non è lo stesso evento del colore su un semplice elenco di riferimenti, e la nota di rilascio non è il documento che lo copre.

Una frase con una citazione dentro viene valutata come prosa, e non per conto suo

La descrizione pubblicata da Turnitin del calcolo elenca una catena di operazioni. Le frasi vengono estratte, raggruppate in segmenti sovrapposti, ogni segmento riceve un valore tra 0 e 1, ogni frase idonea eredita il punteggio dei segmenti che la coprono, e questi punteggi raccolti vengono aggregati nel numero del documento. Una citazione non entra in nessun passaggio di quella catena.

La sovrapposizione ha una conseguenza che quasi nessuno segue fino in fondo. Una frase vicina al bordo di un segmento si trova dentro due segmenti, quindi porta più di un punteggio ereditato. L'evidenziazione sulla tua frase che contiene la citazione è in parte presa in prestito dalle frasi accanto, ed è per questo che la correzione, se esiste, non si trova mai alla parentesi. Cosa segua e cosa non segua da tutto questo lo abbiamo tracciato in riscrivere una frase segnalata abbassa il punteggio.

Significa anche che diverse modifiche allettanti non hanno niente su cui agire. Rinumerare, sostituire un indicatore tra parentesi con un apice, aggiungere una frase di segnalazione davanti all'affermazione, spostare l'attribuzione alla fine della frase: nessuna di queste cambia la proprietà che viene valutata, perché nessuna di queste cambia la prosa.

Per la versione di questa domanda che parte da "ma quale report ho davvero in mano", perché Turnitin ha segnalato i miei riferimenti percorre le varie diramazioni.

Sul Similarity Report, il comando non è nel tuo documento

Ora l'altro caso. Qualcuno ti ha girato una percentuale, il colore sta sulla tua bibliografia, e ti è stato chiesto di far scendere il numero. Ciò che lo muoverebbe non è nel tuo file.

I report di similarità vengono prodotti con filtri di esclusione, e la bibliografia è uno di questi, le citazioni un altro. Chi ha impostato il report ha scelto quali erano attivi, e quella scelta non viaggia con una percentuale incollata in una email. Due report su un unico file non modificato possono differire molto solo per questo. I due report a confronto tratta i filtri e dove trovarne lo stato; perché il tuo testo virgolettato e citato continua a corrispondere tratta cosa succede ai passaggi attribuiti quando nessuno li ha attivati.

Che è anche l'argomento contro la mossa ovvia. Una voce bibliografica corrisponde alle voci bibliografiche degli altri perché la guida di stile vi ha detto a tutti di produrre la stessa stringa. Una voce riscritta finché non corrisponde più è una voce che non segue più lo stile, e se uno strumento lo fa su tutto l'elenco in una volta non te ne accorgi finché non se ne accorge chi valuta. Cosa succede a citazioni e tabelle dentro uno strumento di riscrittura ha un caso documentato di esattamente questo.

Quindi la risposta utile all'email è una domanda invece di una revisione: quali esclusioni erano attive in quel report, e dov'è il colore fuori dalla bibliografia. La seconda parte è l'unica che richieda davvero una risposta da parte tua.

Cinque minuti con il report davanti

Niente di tutto questo richiede un account, un ricorso o un esperto. Richiede il PDF vero invece dello screenshot di un numero, e circa cinque minuti.

  1. Trova prima la data di generazione. Ogni esclusione e ogni versione del modello descritta in qualsiasi pagina è l'insieme in vigore quando quel file è stato prodotto, non quello descritto oggi sul sito di assistenza.
  2. Guarda l'indicatore IA prima di guardare qualsiasi cosa colorata. Turnitin non attribuisce né punteggio né evidenziazioni nella fascia dall'1% al 19% e mostra invece un asterisco, quindi se hai davanti un asterisco, niente di ciò che vedi evidenziato viene dal report IA.
  3. Segui un passaggio colorato e guarda cosa ti offre. Una corrispondenza che porta a una fonte nominata con una sua percentuale è il Similarity Report. L'evidenziazione IA non compare lì e non porta da nessuna parte.
  4. Chiedi quali filtri di esclusione erano attivi. Bibliografia e citazioni sono interruttori separati, nessuno dei due stati è visibile su un numero girato via email, e chi ha generato il report lo sa.
  5. Se è il report IA, leggi la prosa evidenziata e smetti di contare le righe. La percentuale è calcolata sul testo idoneo e le evidenziazioni stanno in un documento che contiene anche tutto il resto, quindi le due cose non torneranno a occhio.

Messo per iscritto, è un elenco di domande sul report invece che sulla tua scrittura, che è più o meno la proporzione giusta per questo problema specifico.

Dove tracciamo il limite sul materiale di riferimento

Lo strumento HumanPen è un riscrittore di documenti, e la decisione di progettazione rilevante qui riguarda l'ambito più che il risultato. O selezioni tu i passaggi, o carichi il documento insieme al suo AI Writing Report e lasci che siano i passaggi segnalati a definire l'ambito. Vengono riscritti solo i passaggi ripresi dal report; il resto del documento viene conservato tale e quale.

Per l'argomento di questo articolo questo ha una conseguenza specifica. Un elenco di riferimenti non ha motivo di stare dentro l'ambito di una riscrittura, perché è fuori dal calcolo IA da entrambi i lati. Uno strumento che lo tocca comunque sta spendendo il tuo rischio per qualcosa che non avrebbe potuto aiutare il tuo numero.

La fatturazione conta solo le parole effettivamente riscritte, quindi un report che segnala un quinto del documento costa circa un quinto di una passata completa. I passaggi idonei possono essere rielaborati gratuitamente.

Quello che non ti diremo è cosa dirà il tuo prossimo report. La nostra pagina dice che HumanPen punta a preservare significato, struttura, terminologia, citazioni, impaginazione e stili riscrivendo solo il linguaggio necessario, e poi dice di rivedere i documenti complessi dopo il download. Entrambe le metà vanno prese sul serio.

Domande frequenti

Il mio report IA ha colore sulle voci di riferimento stesse. È persino possibile? Lo era, prima che la nota di rilascio di Turnitin datata 9 agosto 2023 annunciasse che era stato corretto un bug che evidenziava scrittura IA dentro le bibliografie e che da quel momento le bibliografie sarebbero state escluse durante l'elaborazione del report. La nota aggiunge che le consegne esistenti devono essere inviate di nuovo prima di essere rielaborate, quindi un report più vecchio ha mantenuto le sue evidenziazioni. Se il tuo report è recente, controlla se quello che hai in mano non sia invece il Similarity Report.

Un elenco di riferimenti più lungo diluirà la mia percentuale IA? No. La percentuale è calcolata sulla prosa idonea, e Turnitin dice che il risultato è "not necessarily the percentage of the entire submission" (non necessariamente la percentuale dell'intera consegna). Le parole che non stanno nel denominatore non possono diluire niente.

La mia bibliografia annotata è evidenziata. È coperta dalla stessa esclusione? Non dalla stessa affermazione. La nota di rilascio riguarda l'esclusione delle bibliografie dall'elaborazione. Un articolo di assistenza di Turnitin elenca separatamente le bibliografie annotate tra i tipi di scrittura in cui il modello non rileva in modo affidabile la scrittura IA, che è un'affermazione sull'affidabilità e non una regola su cosa viene rimosso. Inoltre le annotazioni sono prosa che hai scritto tu, cosa che un semplice elenco di riferimenti non è.

Cambiare stile di citazione cambia uno dei due numeri? Sul lato IA no, perché niente nella descrizione pubblicata di quel calcolo legge le citazioni. Sul lato della similarità, come un report classifica una corrispondenza attribuita dipende da un passaggio di riconoscimento con limiti documentati, e perché il tuo testo virgolettato e citato continua a corrispondere li passa in rassegna.

Cosa dovrei chiedere prima di rispondere a un'email su questo? Il report completo in PDF invece di uno screenshot, la data in cui è stato generato, di quale report si tratta e quali filtri di esclusione erano attivi. Queste quattro risposte sistemano gran parte della questione prima che qualcuno debba discutere della tua scrittura.

CONTINUA A LEGGERE