Turnitin Rileva l'AI in Poesie, Copioni e Bibliografie Annotate?

Un articolo di assistenza di Turnitin affronta direttamente questo argomento. Descrive cosa il modello di rilevamento AI fa e non copre:

"The model does not reliably detect AI-generated text in the form of non-prose, such as poetry, scripts, or code, nor does it detect short-form/unconventional writing such as bullet points, tables, or annotated bibliographies." (Il modello non rileva in modo affidabile i testi generati dall'AI in forma di non prosa, come poesie, copioni o codice, né rileva scritture brevi/non convenzionali come elenchi puntati, tabelle o bibliografie annotate.)

Questa frase indica i formati che il modello non gestisce in modo affidabile. Poesie, copioni e bibliografie annotate sono elencati esplicitamente.

L'articolo prosegue subito dopo: "This means that a document containing several different writing types would result in a disparity between the percentage and the highlights." (Ciò significa che un documento contenente diversi tipi di scrittura porterebbe a una discrepanza tra la percentuale e le evidenziazioni.)

Analizzeremo entrambe le frasi più avanti. La prima definisce il vuoto di copertura. La seconda spiega il sintomo visibile di quel vuoto, ovvero il disallineamento che potresti aver notato nel tuo rapporto.

La seconda frase dell'articolo di assistenza è quella che spiega la confusione in cui incorrono la maggior parte degli studenti. Quando un documento contiene diversi tipi di scrittura, percentuale ed evidenziazioni non coincidono.

Ecco cosa significa nella pratica. La percentuale viene calcolata sul testo che il modello ha effettivamente analizzato. Le evidenziazioni sono i segmenti specifici che il modello ha segnalato. Se un documento mescola prosa con poesia, sezioni in stile copione o voci di bibliografie annotate, quelle parti non in prosa non vengono analizzate allo stesso modo. La percentuale riflette la porzione analizzata e le evidenziazioni mostrano ciò che è stato segnalato al suo interno.

Puoi quindi ritrovarti con un rapporto in cui la percentuale suggerisce una cosa e i passaggi evidenziati un'altra. L'articolo spiega che questo è il risultato atteso per i documenti di tipo misto, non un errore. Leggere le due informazioni confrontandole è l'oggetto di come leggere un rapporto di scrittura AI di Turnitin.

La percentuale inoltre non rappresenta la percentuale dell'intera consegna. Si applica al testo che soddisfa i requisiti per l'analisi e cosa si intende per testo idoneo nel rilevamento AI di Turnitin spiega dove viene tracciato quel confine. Quando parti del documento sono in un formato che il modello non rileva in modo affidabile, quelle parti restano fuori da ciò che il numero descrive.

L'articolo di assistenza elenca tre formati specialmente rilevanti per i corsi di scrittura creativa e ricerca.

La poesia è per definizione non prosa. A capo, sintassi frammentaria e frasi compresse non assomigliano a frasi grammaticali standard, che sono ciò che il modello analizza. L'articolo afferma che i testi generati dall'AI in forma di poesia non vengono rilevati in modo affidabile.

I copioni sono scritti con nomi dei parlanti, indicazioni di scena e scambi di battute. Questa struttura è più vicina a una serie di brevi frammenti che alla prosa continua. Si applica lo stesso vuoto di copertura.

Le bibliografie annotate mescolano voci di citazione con brevi commenti. Le righe delle citazioni stesse sono brevi e formattate convenzionalmente, e l'articolo di assistenza nomina le bibliografie annotate come un formato che il modello non rileva in modo affidabile.

Nulla di questo afferma che questi formati vengano sempre mancati. La formulazione dell'articolo è "does not reliably detect" (non rileva in modo affidabile). Il punto è che un punteggio derivato da un testo per lo più composto da poesie, basato su copioni o costruito da voci di bibliografie annotate dovrebbe essere letto tenendo presente quel limite.

Se il tuo compito è una poesia, una scena teatrale o una bibliografia annotata, la percentuale AI del tuo rapporto ha poco da dire sul tuo lavoro.

Il modello di rilevamento è costruito attorno a frasi in prosa. Quando la tua consegna è per lo più non prosa, il testo analizzato è una piccola parte di ciò che hai effettivamente scritto, oppure il modello può faticare con il formato stesso. Una percentuale bassa o alta in quella situazione non si traduce direttamente in "this writing is or is not AI-generated" (questo testo è o non è generato dall'AI).

Per i docenti, le FAQ offrono indicazioni sui testi difficili da giudicare. Si legge: "If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated." (Se il nostro indicatore mostra una quantità maggiore di scrittura AI in tale testo, vi consigliamo di tenerne conto quando esaminate la percentuale indicata.)

Questa frase riguarda testi con caratteristiche che possono attivare letture inaffidabili, ed è una cornice ragionevole anche per i formati non in prosa. Quando l'indicatore mostra una quantità maggiore di scrittura AI in una consegna di poesia o copione, tenere conto del formato è l'approccio documentato.

Il messaggio per gli studenti è semplice: non trattare un punteggio AI di scrittura creativa come un segnale forte sul tuo lavoro. La parte affidabile del rapporto è la prosa evidenziata. La percentuale è da leggere come un numero legato al testo analizzato, non all'intero documento.

Se la tua consegna di poesia o bibliografia annotata è stata segnalata e vuoi sollevare la questione, la documentazione ti offre parole concrete su cui ancorare la conversazione.

Puoi fare riferimento all'articolo di assistenza specifico che nomina questi formati. L'articolo afferma che il modello non rileva in modo affidabile i testi generati dall'AI in forma di poesie, copioni o codice, e non rileva scritture brevi o non convenzionali come elenchi puntati, tabelle o bibliografie annotate.

Puoi anche riferirti alla seconda frase dello stesso articolo, che afferma che un documento contenente diversi tipi di scrittura porterà a una discrepanza tra la percentuale e le evidenziazioni. Quella frase è una spiegazione documentata per l'esatto sintomo che potresti avere davanti.

Vale la pena essere precisi sulla fonte. L'elenco dei formati proviene da un articolo di assistenza di Turnitin. Le FAQ riassumono la copertura in forma più breve, ma è questo l'elenco specifico che quell'articolo riporta. Mantenere l'attribuzione all'articolo ti mantiene accurato quando ne discuti.

Infine, l'indicatore non è mai stato pensato per essere letto da solo. Le FAQ di Turnitin dicono che la percentuale sull'indicatore di scrittura AI non dovrebbe essere usata come unica base per agire. Un punteggio di scrittura creativa derivato da un'analisi di formato inaffidabile è una base più debole della maggior parte. Le istruzioni del fornitore per quella conversazione sono raccolte in cosa deve fare il tuo docente quando la tua percentuale AI è alta.

Se vuoi vedere come viene letta la tua prosa dal rilevamento AI prima che diventi un argomento in classe, puoi copiare un paragrafo del tuo scritto in un controllo. Offriamo un free trial proprio per questo.