Falsos positivos do Turnitin: como relatá-los e o que fazer

Um falso positivo acontece quando o Turnitin marca como gerado por IA um texto escrito por uma pessoa. A documentação reconhece que isso pode ocorrer e pede que os usuários relatem o caso: "If you find AI written documents that we've missed, or notice authentic student work that we've predicted as AI-generated, please let us know! Your feedback is crucial in enabling us to improve our technology further." (Se você encontrar documentos escritos por IA que deixamos passar, ou notar trabalhos autênticos de estudantes que classificamos como gerados por IA, por favor nos avise! O seu feedback é fundamental para nos permitir continuar melhorando a nossa tecnologia.)

Se você receber um falso positivo, relate o caso ao Turnitin pelo canal de feedback da empresa. Ao mesmo tempo, trate a pontuação como um sinal que exige avaliação humana, e não como um veredito definitivo.

O Turnitin define um limite claro para falsos positivos. A documentação afirma: "We strive to maximize the effectiveness of our detector while keeping our false positive rate - incorrectly identifying fully human-written text as AI-generated - under 1% for documents with over 20% of AI writing." (Buscamos maximizar a eficácia do nosso detector, mantendo a nossa taxa de falsos positivos — isto é, identificar incorretamente como gerado por IA um texto totalmente escrito por humanos — abaixo de 1% em documentos com mais de 20% de escrita por IA.)

Uma meta abaixo de 1% é baixa, mas não é zero. Para instituições que processam milhares de submissões, até uma fração de ponto percentual significa estudantes de verdade tendo que explicar trabalhos que escreveram com as próprias mãos. O que significa uma taxa de 1% de falsos positivos faz essa conta sobre um volume real de submissões. É por isso que o Turnitin pede feedback e que a pontuação foi concebida para ser analisada por um educador, e não para gerar consequências automáticas.

O Turnitin aponta padrões específicos que costumam provocar falsos positivos. A documentação diz: "Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas." (Às vezes os falsos positivos — marcar incorretamente como gerado por IA um texto escrito por humanos — podem incluir conteúdo com pouca variação estrutural, texto que se repete literalmente ou texto parafraseado sem desenvolver novas ideias.)

A frase seguinte é igualmente importante: "If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated." (Se o nosso indicador apontar um volume maior de escrita por IA nesse tipo de texto, recomendamos que você leve isso em consideração ao observar a porcentagem indicada.)

Em outras palavras: se o seu texto é estruturalmente uniforme, repetitivo por escolha, ou fortemente parafraseado a partir das fontes sem acrescentar análise nova, o detector tem mais chance de sinalizá-lo. Isso não quer dizer que o texto foi gerado por IA. Quer dizer que ele compartilha padrões de superfície com a produção de IA, e a porcentagem deve ser lida com isso em mente. Por que os detectores de IA marcam redações bem escritas aborda o mesmo efeito pelo outro lado.

O Turnitin afirma explicitamente que o seu detector não é uma ferramenta disciplinar. A documentação diz: "Our AI writing detection model may not always be accurate (it may misidentify human-written, AI-generated, and AI-paraphrased text), so it should not be used as the sole basis for adverse actions against a student." (O nosso modelo de detecção de escrita por IA pode não ser sempre preciso — ele pode classificar mal textos escritos por humanos, gerados por IA e parafraseados por IA —, portanto não deve ser usado como única base para medidas prejudiciais a um estudante.)

A frase seguinte reforça esse ponto: "It takes further scrutiny and human judgment in conjunction with an organization's application of its specific academic policies to determine whether academic misconduct has occurred." (É preciso um exame mais detido e julgamento humano, em conjunto com a aplicação das políticas acadêmicas específicas da instituição, para determinar se houve má conduta acadêmica.)

Esta é uma instrução direta do Turnitin: a pontuação, sozinha, não basta para concluir que houve má conduta acadêmica. É preciso que uma pessoa analise o trabalho, aplique a política da instituição e tome uma decisão fundamentada.

A documentação vai além ao definir como a pontuação deve ser usada. Ela afirma: "It is not meant to provide definitive answers in isolation. More important than any tool is the educator who sees the score and makes decisions balancing this information with their personal knowledge of their students, their work, and institutional policy." (Não é nossa intenção oferecer respostas definitivas de forma isolada. Mais importante do que qualquer ferramenta é o educador que vê a pontuação e toma decisões equilibrando essas informações com o seu conhecimento pessoal sobre os alunos, sobre o trabalho deles e sobre a política da instituição.)

A frase seguinte resume o uso pretendido: "When educators look at the AI writing score and utilize it as a single data point rather than a definitive response, then it is being used as intended." (Quando os educadores observam a pontuação de escrita por IA e a utilizam como um dado entre outros, e não como uma resposta definitiva, então ela está sendo usada como pretendido.)

É essa a leitura que recomendamos adotar. A porcentagem é um insumo entre vários. Não é um veredito. Se você é educador, combine a pontuação com o que sabe do histórico de escrita do aluno, com o contexto da atividade e com as políticas da sua instituição. Se você é um estudante que recebeu um falso positivo, essa é a sua argumentação mais forte: a própria ferramenta diz que não deve ser tratada como resposta definitiva. Como recorrer de uma sinalização falsa de IA mostra quais provas as universidades realmente aceitam junto com ela.

O Turnitin pede ativamente feedback quando o detector erra. A documentação diz: "If you find AI written documents that we've missed, or notice authentic student work that we've predicted as AI-generated, please let us know! Your feedback is crucial in enabling us to improve our technology further." (Se você encontrar documentos escritos por IA que deixamos passar, ou notar trabalhos autênticos de estudantes que classificamos como gerados por IA, avise-nos! O seu feedback é fundamental para nos permitir continuar melhorando a nossa tecnologia.)

Para relatar um falso positivo, use o canal de feedback do Turnitin. Inclua o documento, a porcentagem de escrita por IA informada e uma explicação breve de por que você considera que o texto sinalizado foi escrito por uma pessoa. Quanto mais específico o feedback, mais útil ele é para aprimorar o modelo. O feedback ao fornecedor, porém, não resolve o seu caso junto à sua instituição; como provar que o seu trabalho é original é o caminho próprio para isso.

Enquanto espera uma resposta ou uma revisão, concentre-se nos trechos sinalizados. Se algumas seções do seu trabalho dispararam a detecção, revisar essas passagens específicas para acrescentar variação estrutural, análise original e uma formulação menos repetitiva pode ajudar na reentrega. Reescrever apenas os parágrafos sinalizados por um relatório do Turnitin detalha essa revisão mais enxuta.

Se o seu relatório do Turnitin sinalizou trechos que você mesmo escreveu, siga estes passos:

1. Relate o falso positivo ao Turnitin usando o canal de feedback da empresa.
2. Revise os trechos sinalizados à luz dos padrões que o Turnitin descreve: uniformidade estrutural, repetição e paráfrase sem acréscimo de ideias novas.
3. Reescreva as seções sinalizadas para acrescentar variação e análise original.
4. Trate a pontuação como um dado entre outros, não como um veredito definitivo, como orienta a própria documentação do Turnitin.

As passagens elegíveis podem ser reprocessadas gratuitamente.