Quelle est la fiabilité du détecteur ?
Nous publions comment nous avons mesuré le détecteur et où il échoue. Lisez ceci avant de vous fier à un résultat.
Modèle
Nous faisons tourner le détecteur open source desklib AI-text detector (DeBERTa-v3-large, licence MIT) sur nos propres serveurs. Le texte est découpé en fenêtres ; le score du document est la moyenne pondérée par tokens et les scores des phrases proviennent de fenêtres qui se chevauchent.
Calibrage sur de vrais textes académiques
Les seuils ont été fixés sur 583 textes académiques écrits par des humains (résumés arXiv, articles PubMed Central d’auteurs non natifs et essais d’étudiants). « Probablement IA » est fixé pour qu’environ 1 % de ces textes humains le dépassent ; « Incertain » couvre la plage entre 1 % et 5 %.
Fausses alertes sur des textes humains de test
Dans une validation en deux parties, la part des textes académiques humains de test classés « Probablement IA » était de 1 % et 0,7 %.
Résultats par groupe de textes
| Groupe | Textes | Classés « Probablement IA » | Classés « Probablement IA » ou « Incertain » |
|---|---|---|---|
| Humain : résumés arXiv | 200 | 0,5 % | 3,5 % |
| Humain : PubMed Central, auteurs non natifs | 183 | 1,1 % | 6 % |
| Humain : essais d’étudiants | 200 | 1 % | 5,5 % |
| Humain : Wikipédia (avant 2022) | 155 | 2,6 % | 8,4 % |
| Humain : textes web généraux | 150 | 32,7 % | 36,7 % |
| IA : modèles 2026, non retouchés | 195 | 96,9 % | 99 % |
| IA : benchmark RAID, non retouché | 200 | 96,5 % | 99 % |
| IA : benchmark RAID, paraphrasé | 200 | 84 % | 92 % |
| IA : réécrit par des outils d’humanisation | 200 | 59,5 % | 74,5 % |
acad583-2026-10-22
Limites connues
- Les textes des modèles les plus récents, surtout quand on leur demande d’écrire comme un humain, passent souvent inaperçus.
- La paraphrase et les outils d’« humanisation » font nettement baisser le score.
- Les textes courts ne sont pas fiables ; en dessous de 50 mots, nous ne donnons pas de résultat.
- Les textes humains très retouchés, stéréotypés ou traduits peuvent être signalés.
- Les seuils sont calibrés sur des textes académiques. Sur des textes web généraux, 32,7 % des échantillons humains ont été classés « Probablement IA ».
Un résultat est une estimation, pas une preuve de fraude. Ne l’utilisez jamais comme seul fondement d’une accusation.