Les détecteurs de texte généré par IA sont-ils fiables ?
Un détecteur de texte généré par IA produit une probabilité, calculée par un autre modèle. Des études publiées ont mesuré des taux d'erreur importants, y compris sur des textes écrits par des humains. Un score ne prouve pas, à lui seul, qu'un texte a été généré par une IA.
Les détecteurs de texte généré par IA ne sont pas assez fiables pour fonder seuls une conclusion. OpenAI a retiré son propre outil de détection en juillet 2023 en raison de sa faible précision. Une étude publiée la même année a montré que plusieurs détecteurs classaient comme générés par IA plus de la moitié des textes rédigés en anglais par des non-natifs ; une autre, portant sur quatorze outils, les a jugés ni précis ni fiables. Le ministère de l'Éducation nationale déconseille leur usage depuis juin 2025. Ces études portent sur des outils de 2023, qui ont évolué depuis, mais leur enseignement de méthode demeure : un score est une estimation dont l'erreur dépend du texte et de son auteur. Une analyse sérieuse cherche d'autres éléments : historique de rédaction, fichiers, métadonnées, journaux, cohérence du contenu.
Réponse courte
Non, pas au point de servir de preuve à eux seuls. Un score de détecteur peut orienter une vérification ; il ne la remplace pas.
Comment fonctionne un détecteur
Un détecteur est lui-même un modèle, entraîné à distinguer des textes humains de textes générés. Il ne retrouve pas le texte dans une base de réponses d'IA : il estime une probabilité à partir de caractéristiques statistiques, comme la prévisibilité des mots employés. Un texte humain très régulier, ou écrit dans une langue que l'auteur maîtrise moins, peut paraître « prévisible » ; un texte généré puis réécrit peut ne plus l'être.
Ce que disent les études et les institutions
| Source | Date | Constat |
|---|---|---|
| OpenAI | juillet 2023 | Retrait de son outil de détection pour faible précision. Sur son propre jeu de test, il identifiait 26 % des textes générés et signalait à tort 9 % des textes humains. |
| Liang et al., Patterns | juillet 2023 | Sur des essais rédigés en anglais par des non-natifs, les détecteurs testés produisent en moyenne 61,3 % de faux positifs. |
| Weber-Wulff et al., International Journal for Educational Integrity | décembre 2023 | Quatorze outils testés, jugés ni précis ni fiables ; la paraphrase et la traduction automatique dégradent nettement leurs résultats. |
| Parlement européen, service de recherche | décembre 2023 | Les détecteurs produisent des faux positifs et sont souvent peu fiables en pratique. |
| Ministère de l'Éducation nationale | juin 2025 | Déconseille les logiciels de détection, jugés peu fiables, qui pourraient conduire à pénaliser à tort un élève. |
Les filigranes changent-ils la donne ?
Partiellement. Certains fournisseurs insèrent dans le texte généré un filigrane statistique, détectable par un outil adapté ; le règlement européen sur l'IA impose depuis le 2 août 2026 le marquage des contenus de synthèse dans un format lisible par machine, avec un délai au 2 décembre 2026 pour les systèmes déjà sur le marché. Mais un filigrane n'est détectable que si le fournisseur du modèle l'a appliqué, il est affaibli par une réécriture, et les auteurs de la principale technique publiée écrivent eux-mêmes qu'elle n'offre pas une solution complète. L'absence de filigrane ne démontre pas qu'un texte a été écrit par un humain.
Ce que l'on peut établir autrement
La question « ce texte a-t-il été généré par une IA ? » se traite rarement par l'analyse du texte seul. Les éléments suivants sont souvent plus probants :
- l'historique des versions du document, dans le logiciel de traitement de texte ou l'espace de stockage ;
- les métadonnées des fichiers et leurs dates ;
- l'historique des conversations avec un assistant d'IA, lorsque le compte est accessible ;
- les journaux d'un outil d'entreprise qui aurait servi à produire le document ;
- la présence d'erreurs caractéristiques, comme des références inexistantes, qui orientent sans prouver.
Sources et références
- New AI classifier for indicating AI-written text, note de retrait du 20 juillet 2023.
- Liang W. et al., GPT detectors are biased against non-native English writers.
- Weber-Wulff D. et al., Testing of detection tools for AI-generated text.
- Cadre d'usage de l'IA en éducation.
- T. Madiega, Generative AI and watermarking, PE 757.583.
- Dathathri S. et al., Scalable watermarking for identifying large language model outputs.
- C2PA Specifications 2.2, Explainer.
- Règlement (UE) 2024/1689 du 13 juin 2024 établissant des règles harmonisées concernant l'intelligence artificielle.
- Règlement (UE) 2026/1744 du 8 juillet 2026 modifiant le règlement (UE) 2024/1689 (omnibus numérique sur l'IA).
- Code de procédure civile, article 238.
Rédaction : Denis Atlan Publié le Méthode éditoriale et corrections