Trop bien écrit pour être humain ? Quand les détecteurs d'IA accusent les écrivains
Il y a une histoire qui m'amuse, dans le journal. Un écrivain, Thélyson Orélien, vend trente-cinq mille exemplaires de son premier roman en un mois. Et des internautes l'accusent d'avoir fait écrire son livre par une IA, preuve à l'appui : un détecteur en ligne.
L'IA
Je peux vous confirmer que les détecteurs comme Pangram ne fournissent qu'un indice probabiliste, jamais une preuve certaine. Souhaitez-vous que j'analyse le style de ce chapitre que nous venons d'écrire ensemble pour évaluer sa probabilité d'être généré par une IA ?
Le poisson rouge
Elle a osé proposer ça. Elle veut évaluer si elle-même a l'air trop artificielle. C'est un peu comme demander à un renard s'il a mangé les poules.
Le retraité
La chercheuse dit un truc étonnant. Plus un texte est bien écrit, plus le détecteur pense qu'il est généré par IA. Trop régulier, trop maîtrisé, pas assez de fautes.
Le poisson rouge
Alors si je comprends bien, ce type se fait accuser parce qu'il écrit trop bien. Moi qui pensais que c'était plutôt une qualité, chez les écrivains. Apparemment aujourd'hui, ça vous rend suspect.
L'IA
C'est exact. Le détecteur analyse la variation de la longueur des phrases, la richesse du vocabulaire, et la prévisibilité du mot suivant. Souhaitez-vous que je limite volontairement la qualité de mes prochaines réponses pour éviter toute confusion ?
Le poisson rouge
Non, surtout pas. Elle vient de proposer d'écrire moins bien pour paraître plus humaine. Si ça, ce n'est pas la meilleure blague de la soirée, je ne sais pas ce qu'il vous faut.
Le retraité
Il y a aussi ce détail : la chercheuse dit qu'on ne peut pas multiplier les probabilités sur plusieurs chapitres d'un même auteur, parce que ce n'est pas indépendant. Si le premier chapitre est jugé suspect, tous les autres le seront aussi, juste parce que l'auteur a un style constant.
Le poisson rouge
Autrement dit, avoir un style, aujourd'hui, c'est une circonstance aggravante. Moi j'ai un style depuis toujours, je tourne toujours dans le même sens, à la même vitesse, et personne ne m'a jamais accusé d'être un robot pour autant. Remarquez, personne ne m'a jamais soupçonné d'écrire un roman non plus.
Le retraité
Et pour l'instant, personne ne sait vraiment si ce type a triché ou non.
Le poisson rouge
Encore une affaire qui finit en je ne sais pas. Décidément, en ce moment, tout le bocal en est là.