Recebeu uma marcação de IA? O que ponderar antes de entregar atrasado

Uma marcação de IA causa ansiedade imediata. Você pode se perguntar se deve reter a entrega e revisar tudo. Antes de tomar essa decisão, ajuda entender o que a documentação diz sobre a pontuação.

O Turnitin afirma: "Hence, we must emphasize that the percentage on the AI writing indicator should not be used as the sole basis for action or a definitive grading measure by instructors." (Por isso, precisamos enfatizar que a porcentagem no indicador de escrita por IA não deve ser usada como única base para ação nem como medida definitiva de avaliação por parte dos instrutores.)

A documentação é direta neste ponto. A porcentagem não é uma medida definitiva. Não é a única base para ação. Se o seu instrutor vê uma porcentagem de IA, a documentação diz a ele para não tratá-la como determinante final da nota.

A documentação acrescenta: "It is not meant to provide definitive answers in isolation. More important than any tool is the educator who sees the score and makes decisions balancing this information with their personal knowledge of their students, their work, and institutional policy." (Não se destina a fornecer respostas definitivas de forma isolada. Mais importante do que qualquer ferramenta é o educador que vê a pontuação e toma decisões equilibrando essa informação com o conhecimento pessoal que tem dos seus alunos, do trabalho deles e da política institucional.)

Isso significa que a pontuação existe dentro de um contexto. Espera-se que o seu instrutor a equilibre com o que sabe sobre você, sobre o seu trabalho e sobre as regras da sua instituição.

A documentação especifica como a pontuação deve ser usada.

"When educators look at the AI writing score and utilize it as a single data point rather than a definitive response, then it is being used as intended." (Quando os educadores observam a pontuação de escrita por IA e a utilizam como um único dado em vez de uma resposta definitiva, então ela está sendo usada como pretendido.)

Um único dado. É essa a expressão que o Turnitin usa para descrever o próprio indicador. Se você está em pânico porque viu uma porcentagem, lembre-se de que a própria documentação apresenta isso como uma informação, não como uma conclusão.

Isso importa quando você está decidindo se entrega atrasado. A pontuação não prova que o seu trabalho foi gerado por IA. Ela indica que algumas partes do texto se parecem com escrita gerada por IA. Espera-se que o educador pese isso junto com outros fatores. Antes de assumir que o número é sequer alto demais, veja qual porcentagem de IA é aceitável no Turnitin.

Se você mesmo escreveu o texto e ainda assim recebeu uma marcação, a documentação reconhece que isso pode acontecer.

"Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas." (Às vezes, os falsos positivos – ou seja, marcar por engano como gerado por IA um texto escrito por um humano – podem incluir conteúdo com pouca variação estrutural, texto que se repete literalmente ou texto que foi parafraseado sem desenvolver novas ideias.)

Pense se a sua escrita se encaixa em alguma dessas descrições. Se o seu texto é estruturalmente uniforme, se repete certas frases ou se parafraseia fontes sem acrescentar análise própria, a documentação diz que os falsos positivos são mais prováveis nesses casos.

A documentação continua: "If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated." (Se o nosso indicador mostrar uma quantidade maior de escrita por IA nesse tipo de texto, aconselhamos que você leve isso em consideração ao observar a porcentagem indicada.)

Isso é relevante para a sua decisão. Se o texto marcado tem essas características, a porcentagem pode estar inflada. A própria documentação recomenda cautela ao interpretar a pontuação para esse tipo de conteúdo.

A extensão do seu documento afeta o funcionamento da detecção. Para textos mais curtos, a documentação descreve uma limitação específica.

"In shorter documents where there are only a few hundred words, the prediction will be mostly 'all or nothing' because we're predicting on a single segment without the opportunity to overlap." (Em documentos mais curtos, com apenas algumas centenas de palavras, a previsão será basicamente «tudo ou nada», porque estamos fazendo a previsão em um único segmento, sem oportunidade de sobreposição.)

E: "This means that some text that is a mix of AI-generated and original content could be flagged as entirely AI-generated." (Isso significa que parte do texto que é uma mistura de conteúdo gerado por IA e conteúdo original pode ser marcada como totalmente gerada por IA.)

Se a sua entrega tem apenas algumas centenas de palavras, talvez a detecção não tenha segmentos suficientes para produzir um resultado nuançado. Um documento em parte original e em parte gerado por IA pode ser marcado como totalmente gerado por IA. Essa é uma limitação documentada da ferramenta, não uma propriedade da sua escrita.

Se você está pensando em entregar atrasado um documento curto, vale manter isso em mente. A porcentagem em um documento curto pode ser menos precisa do que em um mais longo — no limite, você tem o Turnitin dizendo que o seu trabalho é 100% IA.

O Turnitin documenta a sua meta de falsos positivos, e a condição associada a ela é importante.

"We strive to maximize the effectiveness of our detector while keeping our false positive rate - incorrectly identifying fully human-written text as AI-generated - under 1% for documents with over 20% of AI writing." (Nós nos esforçamos para maximizar a eficácia do nosso detector mantendo a nossa taxa de falsos positivos – identificar incorretamente como gerado por IA um texto totalmente escrito por um humano – abaixo de 1% em documentos com mais de 20% de escrita por IA.)

E: "In other words, we might flag a human-written document as AI-written for one out of every 100 fully-human written documents." (Em outras palavras, podemos marcar como escrito por IA um documento escrito por um humano a cada 100 documentos totalmente escritos por humanos.)

A meta é inferior a 1% para documentos com mais de 20% de escrita por IA. Isso significa que a meta se aplica especificamente a documentos em que uma parte significativa é gerada por IA. Para documentos com menos escrita por IA, o comportamento dos falsos positivos pode ser diferente.

A documentação também reconhece que os falsos positivos acontecem, a uma taxa de aproximadamente um em cada 100 documentos totalmente escritos por humanos. Essa não é uma taxa zero. Se o seu texto é totalmente escrito por você, existe uma possibilidade documentada de uma marcação equivocada. O que uma taxa de falsos positivos de 1% significa quando uma universidade envia 75.000 trabalhos põe um número em quantas vezes isso recai sobre alguém.

Eis o que a documentação sugere que você pondere.

Primeiro: a pontuação não é a única base para ação. A documentação diz isso diretamente. Uma porcentagem de IA sozinha não determina a sua nota nem o resultado.

Segundo: a pontuação é um único dado. É uma informação que se espera que o seu instrutor equilibre com outros conhecimentos.

Terceiro: verifique se o seu texto tem características de falso positivo. Se falta variação estrutural, se ele se repete ou se parafraseia sem ideias novas, a documentação reconhece uma chance maior de falso positivo.

Quarto: considere a extensão do documento. Documentos curtos de algumas centenas de palavras enfrentam uma previsão de tudo ou nada que pode marcar conteúdo misto como totalmente gerado por IA.

Quinto: a meta de falsos positivos é inferior a 1% para documentos com mais de 20% de escrita por IA. Para texto totalmente escrito por humanos, a taxa documentada de falsos positivos é de aproximadamente um em 100.

Antes de decidir entregar atrasado, fale com o seu instrutor. Pergunte se ele pode compartilhar com você o relatório de IA em PDF. A documentação confirma que os instrutores podem baixá-lo e compartilhá-lo. Ver quais seções estão marcadas vai ajudar você a entender o que a porcentagem realmente reflete.

O objetivo não é entrar em pânico e reescrever tudo. O objetivo é entender o que a pontuação significa, quais são as suas limitações, e então tomar uma decisão informada. Se você for revisar, reescrever apenas os parágrafos que um relatório do Turnitin marcou é a versão que custa menos tempo.