Como Funciona a Detecção de IA do Turnitin?

O Turnitin calcula sua taxa de IA dividindo o trabalho em sentenças, agrupando-as em segmentos sobrepostos e atribuindo a cada segmento uma probabilidade entre 0 e 1. Essas pontuações são agrupadas e agregadas numa porcentagem única para o documento inteiro. O modelo analisa apenas prosa, não código nem listas com marcadores. Apenas instrutores e administradores conseguem ver a pontuação, embora possam baixar e compartilhar um PDF com você. Se o valor ficar entre 1% e 19%, o relatório exibe um asterisco em vez do número.

O processo começa quando você envia seu trabalho. O Turnitin descreve assim: "When a paper is submitted to Turnitin, sentences from the submission are extracted and segmented into overlapping sections for prediction analysis. Each segment is classified by the AI detection model and given a value between 0 and 1, denoting the probability of the text being likely human or AI-generated. Each qualifying sentence within these segments inherits the segment's score. Since segments overlap, some sentences may have multiple scores, which are then pooled into a single score. These sentence scores are further aggregated and used to compute the overall document AI writing score." (Quando um trabalho é enviado ao Turnitin, as sentenças da submissão são extraídas e segmentadas em seções sobrepostas para análise de predição. Cada segmento é classificado pelo modelo de detecção de IA e recebe um valor entre 0 e 1, indicando a probabilidade de o texto ser provavelmente humano ou gerado por IA. Cada sentença qualificada dentro desses segmentos herda a pontuação do segmento. Como os segmentos se sobrepõem, algumas sentenças podem ter múltiplas pontuações, que são então agrupadas numa pontuação única. Essas pontuações de sentença são agregadas e usadas para calcular a pontuação geral de escrita por IA do documento.)

Há vários pontos importantes aqui. Primeiro, a unidade de análise é a sentença, não o documento inteiro. Segundo, os segmentos se sobrepõem, ou seja, uma única sentença pode pertencer a múltiplos segmentos e carregar várias pontuações que são agrupadas. Terceiro, a porcentagem final é uma agregação de todas essas pontuações a nível de sentença. Não é um único julgamento, mas muitos pequenos julgamentos combinados.

É por isso que dois documentos com a mesma porcentagem podem ter distribuições diferentes de texto sinalizado. Um pode ter poucas sentenças fortemente sinalizadas, enquanto outro tem muitas levemente sinalizadas. A agregação suaviza essas diferenças num único número.

Nem tudo no seu documento é analisado. O Turnitin afirma: "The model does not reliably detect AI-generated text in the form of non-prose, or code, nor does it detect short-form/unconventional writing such as bullet points (short non-sentence structures)." (O modelo não detecta de forma confiável texto gerado por IA na forma de não-prosa ou código, nem detecta escrita curta ou não convencional, como listas com marcadores (estruturas curtas que não são sentenças).)

Isso significa que blocos de código, marcadores, listas numeradas e outros elementos que não são prosa ficam de fora da análise de detecção de IA. Apenas sentenças de prosa, parágrafos reais de texto conectado, são processados pelo modelo. O Turnitin explica: "This means that a document containing several different writing types would result in a disparity between the percentage and the highlights." (Isso significa que um documento contendo vários tipos diferentes de escrita resultaria numa disparidade entre a porcentagem e os destaques.)

Se seu trabalho mistura parágrafos longos de prosa com listas de marcadores e trechos de código, a porcentagem reflete apenas as porções de prosa. Os destaques também cobrem apenas a prosa. Isso pode causar confusão se você comparar o texto destacado com o comprimento total do documento e os números não baterem. A porcentagem é calculada em relação à prosa qualificada, não ao documento completo.

Estudantes não conseguem ver o indicador de detecção de escrita por IA nem o relatório diretamente. O Turnitin afirma: "The AI writing detection indicator and report are not visible to students." (O indicador de detecção de escrita por IA e o relatório não são visíveis para estudantes.) E também: "Please note, only instructors and administrators are able to see the indicator." (Observe que apenas instrutores e administradores conseguem ver o indicador.)

Isso não significa que você nunca poderá ver sua própria pontuação. O Turnitin acrescenta: "However, with the PDF download feature, instructors can download and share the AI report with students." (No entanto, com o recurso de download em PDF, instrutores podem baixar e compartilhar o relatório de IA com estudantes.) Ou seja, o caminho para ver sua pontuação passa pelo instrutor. Se ele optar por baixar o PDF e compartilhar com você, você poderá ver a porcentagem, os destaques e qualquer asterisco. Se ele não compartilhar, você não verá nada pela interface do Turnitin. O login no Turnitin para estudantes explica o que a visualização do estudante contém e o que não contém.

Se precisar ver seu relatório para fins de revisão, pergunte ao instrutor se ele pode baixar e compartilhar o PDF. Muitos instrutores aceitam fazer isso, especialmente se você explicar que quer endereçar as passagens sinalizadas antes da submissão final.

Se a pontuação de IA ficar entre 1% e 19%, o relatório não mostra uma porcentagem. Em vez disso, mostra um asterisco (%). O Turnitin explica: "To avoid potential incidence of false positives, no score or highlights are attributed for AI detection scores in the 1% to 19% range. When AI is detected below the 20% threshold in the report, it is now indicated with an asterisk (%) and no percentage is attributed." (Para evitar possível incidência de falsos positivos, nenhuma pontuação ou destaques são atribuídos para pontuações de detecção de IA na faixa de 1% a 19%. Quando a IA é detectada abaixo do limite de 20% no relatório, isso agora é indicado com um asterisco (*%) e nenhuma porcentagem é atribuída.)

O asterisco significa que o detector encontrou algo, mas não o suficiente para se comprometer com um número específico. Nenhum destaque aparece nessa faixa também. A pontuação é baixa demais para o Turnitin justificar apontar passagens específicas como geradas por IA. É uma abordagem conservadora, projetada para reduzir falsos positivos.

Se você vir o asterisco, o detector captou alguns padrões semelhantes a IA na sua prosa. Mas a confiança ficou abaixo do limite onde o Turnitin se sente confortável em atribuir uma porcentagem firme. Para a maioria dos estudantes, o asterisco não é motivo de alarme. O que o asterisco (*%) significa numa pontuação de IA do Turnitin explica o que dizer se um instrutor perguntar sobre isso.

Se seu instrutor compartilhar o relatório em PDF com você e você vir uma porcentagem acima de 20%, examine as passagens destacadas. Esses são os segmentos específicos que o modelo classificou como provavelmente gerados por IA. Concentre sua revisão nessas seções, seguindo a ordem que reescrever apenas os parágrafos que um relatório do Turnitin sinalizou estabelece. Mantenha citações, tabelas e blocos de código intactos, já que esses não fazem parte da análise de IA.

Se você vir o asterisco, não há passagens destacadas para endereçar. A pontuação está abaixo do limite de relatório. Você ainda pode revisar sua prosa em busca de fraseado genérico ou formulaico, mas não há nenhuma sinalização específica para rebater.

Se sua porcentagem for alta o suficiente para preocupar você ou seu instrutor, revise as passagens sinalizadas e reenvie. Lembre-se de que o modelo se atualiza ao longo do tempo, então um reenvio pode produzir uma pontuação diferente mesmo com o mesmo texto. É por isso que comparar dois relatórios é melhor do que comparar duas pontuações.

Passagens elegíveis podem ser reprocessadas sem custo.