Peut-on vraiment obtenir 0 % d’IA sur Turnitin ?

Un indicateur de rédaction IA de Turnitin actuel peut afficher 0 %. Depuis le 8 juillet 2024, zéro est le seul chiffre exact qu’il affiche en dessous de vingt : les résultats de 1 % à 19 % sont rendus sous la forme d’un astérisque, sans pourcentage et sans surlignage. Les rapports générés avant ce changement d’affichage font exception ; Turnitin indique qu’ils peuvent encore afficher un score numérique inférieur à 20 %. L’indicateur n’est pas visible pour les étudiants non plus. Ce que les gens poursuivent donc quand ils parlent de « 0 % d’IA » — un petit chiffre que l’on peut regarder encore et encore, viser et confirmer — n’est pas un état que l’on contrôle ou que l’on observe normalement. Il apparaît sur l’écran de quelqu’un d’autre, sous une règle d’affichage dont la date compte.

Le reste de cet article explique ce que sont ces quatre états, pourquoi l’espace entre zéro et vingt ne comporte aucune graduation, et ce qu’un 0 % réglerait — ou ne réglerait pas — si quelqu’un vous en montrait un.

La FAQ actuelle de Turnitin comporte une courte section intitulée "What do the different indicators mean?" (que signifient les différents indicateurs ?), qui liste ce qui apparaît à côté d’un envoi une fois le traitement terminé. Elle compte quatre états, et les différences entre eux comptent plus que les différences entre deux chiffres.

Les deux dernières lignes ne sont pas des résultats du tout : dans un cas, Turnitin refuse de traiter le fichier ; dans l’autre, il essaie et échoue. Lisez les deux premières ensemble et la forme de l’échelle actuelle devient évidente. À partir de vingt, l’indicateur se comporte comme une mesure : un chiffre, et des passages surlignés que vous pouvez aller regarder. En dessous de vingt, il se comporte comme un interrupteur. Zéro est une position. La plage de 1 % à 19 % est l’autre.

Un rapport généré sous la règle en vigueur depuis le 8 juillet 2024 n’affichera pas 4 %, 11 % ou 19 % ; il affiche l’astérisque à la place. Un rapport plus ancien peut conserver l’un de ces chiffres, d’où la nécessité d’indiquer la date de génération à côté de tout score que vous citez. Sur un rapport actuel, « je veux faire descendre mon score à quelque chose de petit » décrit un résultat que l’interface ne peut pas graduer pour vous, et « je veux 0 % » nomme le seul chiffre exact sous vingt qu’elle affichera.

La règle est publiée, et la raison aussi :

"False positives (incorrectly flagging human-written text as AI-generated) are a possibility in AI models. To avoid potential incidence of false positives, no score or highlights are attributed for AI detection scores in the 1% to 19% range. When AI is detected below the 20% threshold in the report, it is now indicated with an asterisk (*%) and no percentage is attributed." (Les faux positifs — signaler à tort comme généré par IA un texte écrit par un humain — sont une possibilité dans les modèles d’IA. Pour éviter toute incidence potentielle de faux positifs, aucun score ni surlignage n’est attribué aux résultats de détection IA compris entre 1 % et 19 %. Lorsque de l’IA est détectée sous le seuil de 20 % dans le rapport, cela est désormais indiqué par un astérisque (*%) et aucun pourcentage n’est attribué.)

Cette frontière supprime deux types d’information, et le second attire moins l’attention qu’il ne le mérite. Le chiffre disparaît, c’est la partie que tout le monde remarque. Les surlignages disparaissent aussi. Sous le seuil, le rapport ne vous donne aucun passage à inspecter ni aucune localisation du résultat au niveau de la phrase.

Poursuivez ce raisonnement jusqu’à une révision sous la règle d’affichage actuelle. Supposons que le résultat sous-jacent soit passé de 17 % à 3 %. Les deux rapports affichent un astérisque. Même symbole, même absence de surlignages, tout pareil. Le travail a eu lieu ; l’interface n’a pas le vocabulaire pour en rendre compte. Quiconque affirme qu’un rapport actuel est passé « de 15 % à 4 % » fournit deux chiffres exacts que le rapport n’a pas affichés. Un rapport daté d’avant le 8 juillet 2024 est l’exception, pas la preuve que la règle actuelle fonctionne autrement.

Rien de tout cela n’est une règle sur l’inconduite. C’est une décision sur ce que le fournisseur met à l’écran ; le moment où un établissement examine un envoi vient de la politique de cet établissement. Nous avons traité ce point dans 20 % d’IA, est-ce trop élevé ?.

Ce qui fait de « puis-je atteindre 0 % ? » une question d’accès avant d’être une question de difficulté. La FAQ l’explique en deux phrases, et la seconde est celle qui passe d’ordinaire à la trappe :

"The AI writing detection indicator and report are not visible to students. However, with the PDF download feature, instructors can download and share the AI report with students." (L’indicateur et le rapport de détection de rédaction IA ne sont pas visibles pour les étudiants. Cependant, avec la fonction de téléchargement PDF, les enseignants peuvent télécharger le rapport IA et le partager avec les étudiants.)

Ailleurs sur la même page : "only instructors and administrators are able to see the indicator." (seuls les enseignants et les administrateurs peuvent voir l’indicateur). La seule voie par laquelle votre propre résultat IA vous parvient passe donc par la décision de quelqu’un d’autre de télécharger un PDF et de vous l’envoyer. C’est une voie réelle — beaucoup d’étudiants ont vu leur rapport —, mais ce n’est pas un cadran que vous pouvez consulter.

Ce qui signifie que la boucle que la plupart des conseils tiennent pour acquise n’existe pas. Envoyer, regarder le score, réviser, regarder encore : les deux étapes qui consistent à regarder ne vous appartiennent pas. Ce que vous obtenez à la place, c’est un verdict unique, plus tard, éventuellement transmis, éventuellement sous la forme d’une capture d’écran sans date. Et quand un tuteur dit que l’indicateur « ne s’affiche pas », cela a ses propres causes documentées, sans aucun rapport avec votre fichier. Nous les avons rassemblées dans pourquoi votre score IA est manquant ou incohérent.

Supposons que vous en obteniez un quand même : un enseignant télécharge le PDF, vous le remet, et il indique 0 %. Voici ce que dit Turnitin de la décision de conception qui se cache derrière ce chiffre :

"In order to maintain this low rate of 1% for false positives, there is a chance that we might miss some AI written text in a document. We're comfortable with that since we do not want to incorrectly highlight human-written text as AI-written. For example, if we identify that 50% of a document is likely written by an AI tool, it could contain as much as 65% AI writing." (Afin de maintenir ce faible taux de 1 % de faux positifs, il est possible que nous manquions une partie du texte rédigé par IA dans un document. Cela ne nous pose aucun problème, car nous ne voulons pas signaler à tort un texte écrit par un humain comme écrit par l’IA. Par exemple, si nous identifions que 50 % d’un document sont probablement écrits par un outil d’IA, celui-ci pourrait contenir jusqu’à 65 % de rédaction par IA.)

C’est un fournisseur qui dit, avec ses propres mots, qu’il préfère manquer du texte IA plutôt que de signaler du texte humain. Trois conséquences en découlent, et elles jouent dans les deux sens :

• Un 0 % ne certifie pas que rien n’a été assisté par IA. L’outil est calibré pour déclarer moins que la réalité. Un zéro est compatible avec un travail propre, mais aussi avec un travail que le modèle n’a pas détecté, et le rapport ne contient rien qui distingue les deux.
• Un 0 % n’est pas une affirmation sur l’ensemble de votre fichier. Le pourcentage est calculé sur la prose éligible. Un document composé surtout de listes, de tableaux chiffrés et d’une section de références a été comparativement peu évalué : son zéro couvre donc moins de terrain qu’il n’y paraît. Les paragraphes entiers à l’intérieur de cellules de tableau sont un cas à part : Turnitin indique qu’il traite la prose longue dans les tableaux. Le problème du dénominateur fait l’objet de comment lire un rapport de rédaction IA de Turnitin.
• Un 0 % n’est pas une preuve que vous pouvez emporter dans une conversation. Turnitin affirme explicitement qu’il ne détermine pas l’inconduite et qu’il fournit des données permettant aux enseignants de décider. Ce qui répond vraiment à « est-ce vous qui avez écrit ceci ? », ce sont les brouillons, les sources, les notes et votre capacité à parler du travail. Ces éléments sont listés dans signalé, mais c’est vous qui l’avez écrit.

Un zéro est la sortie d’un classifieur, exécutée sur une partie d’un document, un jour donné, sous une version donnée du modèle. Cela vaut la peine de l’avoir. Cela règle moins de choses que ce que l’expression « 0 % d’IA » suggère.

Un chiffre manquant n’est pas automatiquement un zéro. Parfois, il n’y a aucun résultat ; parfois, il y a un résultat non nul dont le chiffre exact est retenu ; et parfois, un fichier court ou pauvre en prose produit un résultat réel sur un dénominateur étroit. Ces cas ont besoin de noms différents.

• Double tiret gris ou erreur de traitement : aucun résultat. Moins de 300 mots de prose longue, plus de 30 000 mots, une langue ou un type de fichier non pris en charge peuvent rendre le fichier inéligible ; un état d’erreur distinct signifie que Turnitin a échoué pendant le traitement. Aucun des deux n’est un score propre, et aucun ne doit être présenté comme 0 %. Tous les détails dans Turnitin peut-il vérifier une thèse entière ?.
• Astérisque : un résultat supérieur à zéro dont le chiffre est caché. Sur les rapports générés sous la règle actuelle, cela signifie que la plage détectée va de 1 % à 19 %. Le pourcentage et les surlignages sont retenus en raison du risque de faux positifs. Ce n’est pas vide, même si cela ne vous donne aucun endroit par où commencer.
• Document court ou pauvre en prose : toujours potentiellement un vrai résultat. Le contenu non prose rétrécit le dénominateur ; il ne supprime pas le score en soi. S’il reste au moins 300 mots de prose longue, le fichier peut encore générer un rapport. Dans un document de quelques centaines de mots seulement, Turnitin indique que la prédiction est principalement "all or nothing" (tout ou rien), parce qu’il n’y a qu’un segment et aucune superposition à moyenner. C’est un avertissement sur les résultats extrêmes, pas un troisième état vide. La source n’exclut pas le côté zéro, et le zéro se trouve à l’intérieur de la plage de réussite publiée par Turnitin.

Le test pratique est simple. Un double tiret ou une erreur signifie qu’il n’y a pas de score. Un astérisque signifie qu’il y a un score non nul qui n’est pas affiché. Un 0 % bleu est une vraie sortie du classifieur, même quand le fichier était court ou que le dénominateur éligible était étroit. Les trois ne doivent pas être ramenés à une seule idée de « rien détecté ».

Retournez tout cela et il en ressort quelque chose d’un peu bizarre. Les rapports qui inquiètent les gens — ceux à vingt et au-delà — sont les seuls à fournir assez d’information pour agir. Ils ont un chiffre et des passages surlignés. Dans la plage actuelle de 1 % à 19 %, vous n’avez ni l’un ni l’autre ; à 0 %, vous avez le chiffre mais aucun passage surligné à réviser.

L’outil HumanPen est construit de ce côté de la ligne. Téléversez le DOCX avec le rapport IA de Turnitin ou d’iThenticate, et les passages surlignés deviennent le périmètre. Seul ce texte est réécrit ; tout le reste demeure intact. La facturation se fait sur le nombre de mots réécrits, et non sur la longueur du fichier téléversé.

HumanPen propose aussi un accompagnement gratuit : les résultats éligibles peuvent continuer à faire baisser l’IA gratuitement. Cet accompagnement ne promet pas un résultat de détecteur particulier.

Rien de tout cela n’est une prévision. Notre propre FAQ sur cette page le dit clairement : "Detectors keep changing, so no one can honestly promise a fixed outcome." (les détecteurs ne cessent de changer, donc personne ne peut honnêtement promettre un résultat fixe). Le pourcentage lors d’une nouvelle vérification est inconnu ; en citer un à l’avance serait une fabrication. Turnitin n’a jamais dit comment une modification donnée devrait faire évoluer un score, et la règle d’affichage ci-dessus signifie que, sous le seuil, personne ne pourrait de toute façon vérifier une telle affirmation. Ce que nous pouvons vous dire, c’est quels mots sont touchés et lesquels sont facturés.

Un rapport de rédaction IA de Turnitin peut-il vraiment afficher 0 %? Oui. La FAQ de Turnitin décrit l’état de réussite comme un indicateur bleu avec un pourcentage entre 0 et 100, et le zéro se trouve dans cette plage. La réserve concernant la date porte sur 1 % à 19 % : les rapports plus anciens peuvent conserver ces chiffres, tandis que les rapports actuels affichent un astérisque.

Un astérisque, est-ce la même chose que 0 %? Non. Sur un rapport actuel, l’astérisque signifie que de l’IA a été détectée dans la plage de 1 % à 19 %, et Turnitin retient le chiffre et les surlignages dans cette plage à cause des faux positifs. C’est un résultat non nul que l’interface refuse de quantifier.

Puis-je consulter mon propre score IA avant mon tuteur? Pas par l’intermédiaire de l’indicateur. Turnitin indique que l’indicateur et le rapport de détection de rédaction IA ne sont pas visibles pour les étudiants, et que les enseignants peuvent télécharger le rapport en PDF et le partager. Tout ce que vous voyez, vous le voyez parce que quelqu’un a choisi de vous le montrer.

Si mon rapport indique 0 %, suis-je en sécurité? C’est un bon résultat et ce n’est pas un certificat. Turnitin dit accepter de manquer une partie de la rédaction par IA afin de maintenir un faible taux de faux positifs, et dit que le score IA ne détermine pas l’inconduite. Les deux moitiés de cet énoncé comptent.

La réécriture me mènera-t-elle à 0 %? Le pourcentage lors d’une vérification future ne peut pas être promis. Un outil qui en annonce un cite un résultat qu’il ne possède pas. Ce qu’une réécriture guidée par le rapport décide, c’est quels passages sont modifiés et lesquels restent exactement tels que vous les avez écrits.