Como os professores devem usar a pontuação de IA do Turnitin

O Turnitin já disse isso em mais de um lugar. Na sua FAQ sobre detecção de escrita por IA: "Hence, we must emphasize that the percentage on the AI writing indicator should not be used as the sole basis for action or a definitive grading measure by instructors." (Por isso, precisamos enfatizar que a porcentagem exibida no indicador de escrita por IA não deve ser usada por professores como única base para uma decisão, nem como medida definitiva de avaliação.)

Uma segunda página oficial diz o mesmo, com outras palavras: o modelo "may not always be accurate," (pode não ser sempre exato), de modo que "should not be used as the sole basis for adverse actions against a student," (não deve ser usado como única base para medidas desfavoráveis a um aluno), e apurar uma má conduta "takes further scrutiny and human judgment." (exige uma análise mais aprofundada e julgamento humano).

A mensagem é a mesma em todos os materiais do próprio Turnitin: o número não é a decisão. A decisão é do educador, e o fornecedor trata em separado de o que se orienta um professor a fazer quando a porcentagem de IA está alta.

A orientação do Turnitin para a leitura do relatório diz isso sem rodeios: a pontuação de IA "is not meant to provide definitive answers in isolation." (não tem o objetivo de dar respostas definitivas quando considerada isoladamente).

A mesma página explica por quê: "More important than any tool is the educator who sees the score and makes decisions balancing this information with their personal knowledge of their students, their work, and institutional policy." (Mais importante do que qualquer ferramenta é o educador que vê a pontuação e toma decisões equilibrando essa informação com o conhecimento pessoal que tem de seus alunos, do trabalho deles e das normas da instituição.)

E encerra com o uso que se pretende dar: "When educators look at the AI writing score and utilize it as a single data point rather than a definitive response, then it is being used as intended." (Quando os educadores observam a pontuação de escrita por IA e a utilizam como um dado entre outros, e não como uma resposta definitiva, então ela está sendo usada como se pretende.) Essa frase é a descrição inteira do trabalho de quem precisa interpretar a pontuação.

O Turnitin também lista os tipos de texto com maior propensão a falsos positivos — escrita humana apontada como IA: "content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas." (conteúdo sem muita variação estrutural, texto que se repete literalmente ou texto parafraseado sem desenvolver ideias novas.)

A continuação é a parte que vale guardar: "If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated." (Se o nosso indicador apontar um volume maior de escrita por IA nesse tipo de texto, recomendamos que você leve isso em consideração ao olhar a porcentagem indicada.)

Na prática, isso significa que uma redação de aluno com estrutura sempre igual, que reaproveita as próprias palavras ou que parafraseia uma fonte sem acrescentar ideias novas pode receber uma pontuação mais alta sem que o texto tenha sido realmente gerado por IA. O próprio Turnitin recomenda relativizar esse tipo de pontuação. É também por isso que parafrasear pode fazer a pontuação de IA do Turnitin subir, e não cair.

Comece pela referência oficial: a pontuação "should not be used as the sole basis for action." (não deve ser usada como única base para uma decisão). Uma porcentagem, por si só, não é prova de má conduta.

A própria formulação do Turnitin é que quanto mais texto, mais confiável a previsão, e que documentos curtos são o caso mais fraco. A sua FAQ observa que, em documentos de apenas algumas centenas de palavras, "the prediction will be mostly 'all or nothing'." (a previsão será basicamente tudo ou nada). Portanto, em trabalhos curtos, trate o número com cautela redobrada.

Quando uma pontuação parece alta, olhe o texto, não apenas o número: a escrita é plana, repetitiva ou parafraseada sem ideias novas? Em caso afirmativo, é exatamente esse o padrão que o Turnitin manda pesar de outra forma; como a estrutura da redação afeta a pontuação de IA do Turnitin trata do primeiro desses três pontos. Quando a pontuação parece baixa, lembre-se de que a faixa de 1% a 19% é exibida como um asterisco, e não como um número (o que significa o asterisco (*%) na pontuação de IA do Turnitin) — ausência de porcentagem significa ausência de sinal forte, não um atestado de que está tudo bem.

Para um aluno, a conclusão prática é que a pontuação vem acompanhada do julgamento do educador, e não de um veredito. As notas de versão do Turnitin repetem a mesma frase: uma pontuação de escrita por IA "should not be used as the sole basis for adverse actions against a student." (não deve ser usada como única base para medidas desfavoráveis a um aluno).

Se o seu professor levantar a questão da pontuação, a conversa que leva a algum lugar é sobre o próprio texto — estrutura, repetição, paráfrase sem ideias novas —, porque são essas as características que o Turnitin aponta como propensas a falsos positivos. A pontuação é um sinal para olhar, não uma afirmação de que houve má conduta. Para o lado do aluno nessa conversa, veja sinalizado, mas foi você quem escreveu: como preparar a sua resposta.