Détection des textes générés par IA : méthode et résultats de validation

La régression hors ligne a couvert 38 scénarios et 35 contenus de fichiers distincts, dont 10 documents publics, avec génération et présentation de rapports en cinq langues. Elle vérifie traitement, refus corrects et présentation, pas la précision IA/OCR ou antifraude. Les chiffres de modèle ne valent que pour les données, langues, tâches et versions annoncées, pas pour tous les documents, champs numérisés ou signatures.

Limites web : 50 Mo, 100 pages et 60 000 mots, avec des limites de ressources par contrôle. Non examiné, partiel et indéterminé sont distincts. L’absence de constat ne prouve pas l’authenticité. Aucune promesse de récupérer l’historique supprimé, de détecter tous les restes de masquage visuel, de conformité complète UTS #39 ou de certification PAdES à long terme.

Les contrôles DOCX et PPTX examinent les éléments OOXML pris en charge avant conversion ; le contenu PPTX est aussi évalué après conversion. Les styles masqués hérités et les objets hors diapositive ne sont pas couverts. Pour DOC, RTF et ODT, le texte est extrait après conversion : la structure binaire DOC native et l’historique supprimé ne sont pas reconstitués. Le contrôle TXT porte sur le texte et les caractères, sans analyse de mise en page ni validation de signature.

Un détecteur qui manque un texte rédigé par IA laisse passer un dossier qui aurait mérité un second regard. Un détecteur qui signale à tort un texte écrit par une personne met en cause quelqu’un de bonne foi : un assuré, un auteur, un fournisseur. Les deux erreurs n’ont pas le même coût.

FVDOC V3 est conçu pour que la seconde reste rare, quitte à manquer davantage de textes réécrits ou retouchés. C’est pourquoi l’analyse répond « Résultat non concluant » lorsque les signaux sont faibles, et pourquoi un passage non signalé n’est jamais présenté comme écrit par une personne.

T3 · « Indices d’un texte rédigé par IA » : les signaux d’écriture IA portent sur l’ensemble du texte évalué. Le rapport l’indique par « l’ensemble du document », sans pourcentage.

T2 · « Texte mixte : certains passages présentent des signaux d’IA » : une partie du texte porte ces signaux. Le rapport localise les passages et indique la part du texte évalué qu’ils représentent.

T0 · « Aucun signal notable d’écriture IA » : l’analyse n’a pas relevé de signal suffisant. Cela n’établit pas que le texte a été écrit par une personne, et un passage non signalé n’est pas pour autant écarté.

T1 · « Résultat non concluant » : les signaux sont trop faibles ou trop contradictoires pour conclure. L’analyse le dit plutôt que de deviner.

N/E · « Texte insuffisant pour conclure », « Langue non prise en charge », « Aucun texte lisible » : le document n’est pas évalué. Aucun rapport n’est émis et rien n’est débité.

Les documents de test ont été mis de côté et n’ont jamais servi à mettre au point le moteur. Ils réunissent des textes rédigés par des personnes dans les cinq langues (pages web, textes juridiques, PDF réels, textes remis en forme de courrier ou de contrat) et des documents rédigés par des modèles de plusieurs familles, dont une famille entière écartée du développement et des modèles jamais utilisés pendant celui-ci.

Les résultats sont datés et rattachés à une version. Ceux de cette page portent sur FVDOC V3, validé en octobre 2026. FVDOC V3 remplace les versions antérieures ; chaque nouvelle version est évaluée à nouveau avant sa mise en service, et cette page est mise à jour en conséquence. Chaque rapport indique la version qui l’a produit, la date de validation et l’adresse de cette page.

Nous ne décrivons ni la construction du moteur ni les données qui ont servi à le développer. Une méthode publiée est une méthode plus facile à contourner : quiconque voudrait faire passer un texte rédigé par IA pour un texte humain saurait exactement quoi modifier.

Nous publions en revanche ce qui permet de juger l’outil : les taux d’erreur mesurés et les situations où il échoue. Les organisations qui souhaitent évaluer FVDOC V3 sur leurs propres documents peuvent nous contacter pour une évaluation encadrée par un accord.