« Je l'ai écrit moi-même et j'obtiens 90 % » — comment lire ce résultat
Ce que signifie une probabilité IA élevée sur un texte que vous avez rédigé, ce qu'il ne faut surtout pas faire, et ce qu'il y a réellement à vérifier.
La question
J'ai rédigé mon devoir universitaire du début à la fin. Par acquit de conscience je l'ai passé dans un détecteur et j'obtiens 90 %. Je n'ai jamais utilisé d'IA, alors pourquoi ce résultat ? Est-ce que je peux le rendre ?
Réponse courte
Oui, vous pouvez. Et ce score ne signifie pas « 90 % de chances que ce soit une IA ».
Ce que le score veut dire
Un détecteur ne connaît pas l'origine d'un texte. Il observe des caractéristiques statistiques du style : à quel point la phrase s'oriente vers le mot attendu, à quel point la longueur des phrases varie.
Le 90 % se lit donc plutôt ainsi :
« Ce texte présente fortement les traits d'un style de machine. »
Le problème, c'est que les humains présentent ces traits aussi. En particulier dans ces cas-là.
- Un texte relu plusieurs fois — à force de reprises, les phrases s'égalisent.
- Un texte au format imposé — devoir, rapport, mémoire : la structure est contrainte.
- Un texte passé par un correcteur — ce qui faisait votre style se rabote.
- Un texte bien construit — idée en tête de paragraphe, connecteurs réguliers, paragraphes de longueur homogène.
Le dernier point est important. Mieux on écrit, plus le score a tendance à monter. Qu'un devoir travaillé avec soin dépasse un journal intime écrit à la va-vite n'a rien d'étrange.
Ce qu'il ne faut pas faire
Casser ses phrases pour faire baisser le score. Laisser des fautes ou mélanger les tournures au hasard fait descendre le chiffre, mais dégrade la note du devoir. Les gens qui lisent votre texte sont bien plus nombreux que ceux qui regardent un score.
Enchaîner les détecteurs. Les résultats se contrediront, et aucun d'eux ne constituera une preuve. Vous y perdrez seulement du temps.
Ce qu'il faut faire
1. N'ouvrez que les phrases signalées
Le relevé phrase par phrase est plus utile que le score global. Sur chaque phrase signalée, posez une seule question.
Est-ce qu'il y a ici mon jugement ou un fait concret ?
S'il n'y a rien, complétez : le score baisse et le devoir s'améliore. S'il y a quelque chose et que la phrase ressort quand même, laissez-la.
2. Gardez une trace de votre travail
Au cas où la question vous serait posée. Ce n'est pas compliqué.
- Ne supprimez pas le fichier du premier jet.
- Si vous avez rédigé dans un document en ligne, l'historique des versions est déjà conservé.
- Regroupez vos liens de sources au même endroit.
3. Vérifiez votre bibliographie
C'est souvent là, contre toute attente, que se trouve le vrai problème. Cherchez une à une les références citées et assurez-vous qu'elles existent bien.
Si l'inquiétude persiste
Avant de rendre, la seule chose vérifiable est le style, et c'est déjà fait. Reste votre capacité à expliquer.
Notez pour chaque partie une ligne disant pourquoi elle vient à cet endroit. Celui qui sait expliquer la structure d'un texte est celui qui l'a écrit. Avec cette seule préparation, une question éventuelle se règle en général.
Pourquoi les faux positifs se produisent est détaillé dans Faux positif IA : pourquoi un texte que vous avez écrit ressort comme généré, et la conduite à tenir si vous êtes réellement mis en cause dans Accusé d'avoir utilisé l'IA.
Le résultat d'une analyse est une probabilité IA indicative et ne remplace aucun jugement.