Aller au contenu

Éditorial · Production IA

Construire une grille de QA anti-détection IA

Les taux de précision des détecteurs IA se contredisent. Comment construire une grille de QA anti-détection IA reproductible, sans score opaque.

EAErlé Alberton
16 min
Construire une grille de QA anti-détection IA

Les taux de précision annoncés par les détecteurs de texte IA se contredisent fortement d'un fournisseur à l'autre. En 2023, OpenAI a retiré son propre outil de détection, faute d'une précision jugée suffisante. Ce double constat appelle une grille de QA anti-détection IA construite sur ce qu'un relecteur humain peut vérifier de façon reproductible, pas sur un score opaque de plus.

Pourquoi un détecteur automatique ne suffit pas

Une équipe éditoriale qui veut détecter contenu IA avant publication se heurte vite à un problème simple : les outils censés trancher ne sont pas d'accord entre eux. Un détecteur IA renvoie un pourcentage. Ce chiffre a l'apparence d'une mesure objective, alors qu'il repose sur un modèle statistique entraîné sur un corpus que personne, hors l'éditeur de l'outil, ne peut inspecter. Reconnaître les signaux d'un contenu IA non relu ne suffit d'ailleurs pas à juger un texte : un marqueur stylistique isolé n'est jamais une preuve à lui seul. Trois faits suffisent à comprendre pourquoi s'y fier aveuglément pose problème. Les taux publiés ne se recoupent pas d'une source à l'autre, OpenAI a retiré son propre outil, et une étude indépendante documente un biais net contre certains auteurs humains.

Des taux de précision qui ne se recoupent pas d'une source à l'autre

GPTZero, Originality.ai, Copyleaks, Turnitin : chacun de ces outils commerciaux publie ses propres chiffres de précision. Dans les sources consultées pour cette enquête, aucun protocole indépendant ne les a comparés sur un même corpus, avec la même méthodologie. Les pourcentages qui circulent proviennent le plus souvent du vendeur de l'outil lui-même, parfois de comparateurs tiers dont la méthodologie n'est pas publiée. Les faux positifs du détecteur IA annoncés varient eux aussi fortement d'une publication à l'autre, sans qu'aucune étude tierce indépendante ne vienne trancher. Vouloir détecter un contenu IA à partir d'un seul score, c'est confier une décision éditoriale à une mesure que personne n'a validée de façon indépendante.

Le couple contenu généré par IA et SEO mérite d'ailleurs d'être posé dans le bon sens. Ce n'est pas l'origine du texte qui compte pour un moteur de recherche, c'est le contrôle qualité qui suit sa production. Un texte sourcé, structuré et relu passe l'épreuve du temps, qu'il ait été écrit à la main ou avec assistance. Un texte bâclé échoue pour les mêmes raisons, quelle que soit sa provenance.

Le signal le plus parlant : OpenAI a retiré son propre détecteur

OpenAI a fermé une porte en juillet 2023 : l'entreprise a retiré son propre outil, l'AI Text Classifier, en invoquant un taux de précision insuffisant pour continuer à le proposer (TechCrunch, 25 juillet 2023). Un concurrent n'a pas démonté cet outil. Son propre éditeur l'a fait. Aucun chiffre précis de précision n'a resurgi depuis cette annonce avec une source vérifiable ; seul le fait du retrait, documenté publiquement, mérite d'être retenu ici. Un détecteur qu'une entreprise aussi dotée en ressources qu'OpenAI juge insuffisamment fiable pour son propre usage ne justifie pas qu'on lui délègue seul une décision éditoriale.

Une étude de Stanford documente le troisième fait avec précision. Liang, Yuksekgonul, Mao, Wu et Zou (arXiv:2304.02819, publiée dans Patterns, Cell Press, 2023) ont soumis 91 copies du test TOEFL, rédigées par des auteurs non-natifs anglophones, à sept détecteurs commerciaux. En moyenne, ces détecteurs ont classé 61,3 % de ces copies comme générées par IA, contre environ 5,1 % pour un échantillon comparable d'auteurs natifs anglophones. Un style d'écriture plus régulier et moins idiomatique, caractéristique d'un non-natif, ressemble statistiquement à ce qu'un modèle de langage produit. Un détecteur qui pénalise à ce point des auteurs non-natifs anglophones n'est pas prêt à trancher seul une décision éditoriale sur n'importe quel texte.

Ces trois constats convergent vers la même conclusion méthodologique : miser sur un score de détecteur revient à transférer une décision éditoriale à un outil dont la fiabilité n'a jamais été établie de façon indépendante.

Ce qu'un détecteur vérifie, ce qu'il ne vérifie pas

Trois familles de technologies se cachent derrière le mot « détecteur ». La première devine, par le calcul, si un texte ressemble statistiquement à une production de modèle de langage. La seconde ne devine rien : elle vérifie une signature laissée au moment de la génération par le modèle lui-même. La troisième ne regarde ni le style ni la génération : elle trace l'historique de modification du fichier. Aucune des trois ne répond à la question qui compte pour une équipe éditoriale, celle de la qualité du contenu publié.

TechniqueCe qu'elle vérifieCe qu'elle ne vérifie pas
Perplexité / burstinessLa probabilité statistique qu'un modèle de langage ait produit cette suite de motsLe sourcing, la structure, la pertinence du contenu
Watermarking (SynthID)Qu'un token ait été généré par un modèle Google ou un partenaire compatibleLes contenus hors de ce périmètre, et la qualité éditoriale
Provenance (C2PA)L'origine et l'historique de modification d'un contenuSi ce contenu est bon, sourcé ou pertinent

Perplexité, burstiness et watermarking : à quoi ça sert réellement

La perplexité mesure à quel point une suite de mots est prévisible pour un modèle de langage donné. Un texte très prévisible obtient une perplexité basse ; un texte qui surprend le modèle obtient une perplexité haute. La burstiness, elle, observe la variance de longueur et de structure des phrases sur un texte entier. Un texte humain alterne naturellement des phrases courtes et des phrases longues. Un texte généré de façon homogène tend, selon cette logique, à aplatir cette variance. Ces deux mesures restent statistiques : elles décrivent une probabilité, jamais une certitude, et un texte humain inhabituel peut très bien produire un score atypique sans avoir été généré par une IA.

Le watermarking fonctionne sur un principe différent, intégré à la génération elle-même. SynthID, développé par Google DeepMind, ajuste les probabilités de sélection des tokens au moment où le modèle écrit : « SynthID adjusts these probability scores to generate a watermark. It's not noticeable to the human eye, and doesn't affect the quality of the output. » Le détecteur associé ne peut cependant lire que ce qu'il a lui-même marqué. Il vérifie les contenus produits par les modèles Google et par quelques partenaires compatibles, dont OpenAI, NVIDIA et Kakao, avec Apple annoncé à venir. Un texte généré par un modèle hors de ce périmètre reste, pour SynthID, invisible.

La provenance (C2PA) prouve une origine, pas une qualité

Le standard C2PA (Coalition for Content Provenance and Authenticity) prend un chemin encore différent. Il encode, dans un manifeste signé cryptographiquement, la provenance d'un contenu numérique : quel outil l'a produit ou modifié, à quelle date, selon quelle chaîne d'étapes. Son comité directeur réunit Adobe, Amazon, BBC, Google, Meta, Microsoft, OpenAI, Publicis Groupe, Sony, TikTok et Truepic.

Mais un manifeste de provenance répond à une seule question : qui, ou quoi, a produit ce contenu. Il ne répond pas à l'autre question, celle qui intéresse une rédaction : ce texte est-il bon. Une IA peut produire un contenu signé C2PA parfaitement sourcé et structuré. Un humain peut produire, sans aucune signature, un texte bâclé. La provenance et la qualité éditoriale sont deux questions disjointes, et confondre les deux conduit à chercher la réponse à la mauvaise question.

Construire la grille : les critères qui se vérifient réellement

Une grille de QA anti-détection IA est un protocole de vérification éditoriale qui remplace le score d'un détecteur automatique par des critères qu'un relecteur humain peut contrôler point par point, de façon reproductible. Une règle claire d'escalade vers un second avis s'applique en cas de doute.

Construire une grille de QA éditoriale revient à lister ce qui se vérifie sans détecteur, pas ce qu'un outil statistique pourrait deviner à sa place. Cinq familles de critères couvrent l'essentiel du travail :

  1. Le sourcing vérifiable : chaque affirmation factuelle renvoie à une source identifiable, pas à une tournure vague du type « des études montrent ».
  2. La structure conforme au plan validé : les sections couvrent ce qui était prévu, dans l'ordre prévu, sans dérive de l'angle en cours de rédaction.
  3. Une prise de position assumée : le texte tranche, argumente, prend parti sur les points qui le demandent, plutôt que d'empiler des généralités consensuelles.
  4. Une variance stylistique réelle : alternance de phrases courtes et longues, vocabulaire qui ne se répète pas en boucle, absence de tics de structure systématiques.
  5. La transparence sur l'assistance IA, quand la réglementation l'exige : un contenu qui relève d'une obligation de marquage le porte ; un contenu qui n'en relève pas n'a rien à déclarer.

Chaque famille se traduit en contrôle opérationnel, pas en impression de lecture :

FamilleCe qu'on vérifie concrètementPreuve à demanderSi la preuve manque
SourcingChaque chiffre ou citation a-t-il une source nommée et datée ?Le lien ou la référence exacte, pas un renvoi vagueCritère bloquant : retour en correction
StructureLes sections prévues sont-elles toutes là, dans l'ordre prévu ?Le plan validé en amont, comparé section par sectionCritère bloquant si une section a disparu sans justification écrite
Prise de positionLe texte tranche-t-il au moins une fois, sur un point qui le demande ?La phrase exacte qui trancheSignal faible : à surveiller, jamais bloquant seul
Variance stylistiqueLes phrases et paragraphes alternent-ils en longueur ?Un comptage, même approximatif, sur deux ou trois paragraphesSignal faible : à surveiller, jamais bloquant seul
Transparence réglementaireLe contenu relève-t-il d'une obligation de marquage identifiée ?Le texte réglementaire précis qui s'applique, ou son absence constatéeCritère bloquant si l'obligation s'applique et n'est pas respectée

Chaque critère reçoit un niveau de gravité, pas un simple coché ou non coché. L'objectif est un scoring reproductible : deux relecteurs qui appliquent la grille au même texte doivent arriver au même verdict, sans dépendre de la sensibilité personnelle de celui qui tient le clavier. Une grille de QA suppose qu'un brief ait déjà tranché l'angle et les sources en amont : difficile de vérifier qu'un texte respecte des critères qu'il n'avait jamais pour mission de remplir. Savoir rédiger un brief éditorial exploitable est donc la condition préalable, pas une étape optionnelle.

Les critères bloquants

Trois situations suffisent à bloquer une publication, sans discussion possible : une affirmation factuelle sans source, une citation invérifiable à l'origine annoncée, et l'absence d'une mention obligatoire exigée par la réglementation. Dans ces trois cas, le relecteur n'arbitre pas une nuance de style. Il constate un manque qui rend le contenu, en l'état, impubliable.

Les signaux faibles (jamais bloquants seuls)

Une phrase un peu lisse, un paragraphe trop équilibré, une transition qui sonne mécanique : pris isolément, aucun de ces signaux ne justifie un rejet. L'étude Stanford citée plus haut le montre par la bande. Un style régulier et peu idiomatique a classé des auteurs humains non-natifs comme IA dans 61,3 % des cas testés, contre environ 5,1 % pour des auteurs natifs. Si un signal statistique isolé pénalise aussi une écriture humaine parfaitement légitime, alors ce même signal ne peut pas, seul, condamner un texte généré par IA. La règle tient en une phrase : un signal faible ouvre une vérification plus poussée, il ne clôt jamais un dossier à lui seul.

Concrètement, l'escalade se déclenche dans deux cas précis : un critère bloquant sur lequel deux relecteurs ne tombent pas d'accord, ou deux signaux faibles cumulés sur le même passage. Dans les deux cas, le second avis revient à un relecteur désigné à l'avance, jamais à celui qui a rédigé ou validé le contenu en premier lieu.

Rendre le scoring reproductible entre deux relecteurs

Un critère de QA n'est utile que s'il produit le même verdict entre deux personnes différentes. C'est une exigence méthodologique, pas un fait établi par une étude externe. C'est la recommandation d'OMKomUnity sur la façon de construire ce type de contrôle, tirée de l'observation répétée de grilles qui échouent précisément sur ce point. Cette exigence de reproductibilité rejoint les points de contrôle d'une production à l'échelle. Au-delà d'un seul relecteur expérimenté, c'est la cohérence du jugement entre plusieurs contributeurs qui doit tenir, à mesure que le volume de production augmente.

L'erreur la plus fréquente : un critère qui dépend de qui l'applique

« Le texte sonne-t-il naturel ? » a l'air raisonnable et ne tient pas la route en pratique. Deux relecteurs expérimentés peuvent trancher différemment sur le même paragraphe, sans que l'un ou l'autre ait tort : le critère lui-même ne définit rien d'observable. Reformulé, il devient vérifiable : « chaque paragraphe contient-il au moins une phrase de moins de dix mots et une de plus de vingt-cinq ? », ou « le texte cite-t-il une source primaire pour chaque chiffre avancé, avec un lien qui fonctionne ? ». La différence entre les deux formulations n'est pas stylistique. La première dépend du jugement de qui l'applique. La seconde se vérifie, point final, et donne le même résultat à n'importe qui l'applique correctement.

Ce que change la réglementation européenne

Le règlement européen sur l'intelligence artificielle (AI Act, règlement UE 2024/1689) est entré en vigueur le 1er août 2024. Son application progresse par étapes jusqu'au déploiement complet prévu pour le 2 août 2028. L'article 50 AI Act contenu IA impose, par étapes, des obligations de transparence : informer l'utilisateur, et marquer de façon lisible par machine les contenus synthétiques concernés. Ces obligations deviennent applicables à partir du 2 août 2026, selon la Commission européenne. Un délai supplémentaire au 2 décembre 2026 s'applique aux obligations de marquage visées à l'article 50(2), pour les systèmes déjà présents sur le marché, selon une analyse juridique publiée par le cabinet Paul Weiss.

Le texte prévoit aussi une exception qui compte pour une rédaction : un contenu généré par IA sur un sujet d'intérêt public, lorsqu'il a fait l'objet d'une revue humaine responsable, peut être exempté de l'obligation d'étiquetage, selon la FAQ de la Commission européenne sur l'article 50. Il ne s'applique pas non plus aux contenus simplement édités de façon standard avec une assistance IA, ni aux textes très courts, ni aux communications machine à machine. Ce cadrage ne remplace pas une grille de QA : il fixe une obligation légale distincte, qui s'ajoute au contrôle qualité plutôt que de s'y substituer. Rien dans ce qui précède ne constitue un conseil juridique ; une équipe qui publie dans l'Union européenne doit vérifier son propre périmètre d'application avec un conseil qualifié.

Le gabarit de scoring à télécharger

La grille décrite plus haut prend la forme d'un tableur, pas d'une simple liste à cocher. Le gabarit regroupe les critères par famille, associe un niveau de gravité à chacun (bloquant, signal faible nécessitant vérification, conforme), et calcule un score total par une formule, pas par une addition à la main.

Ce choix n'est pas cosmétique. Une checklist statique laisse chaque relecteur additionner les points comme il l'entend, ou oublier une pondération en cours de route. Un tableur avec formule automatisée ne garantit pas que deux relecteurs cocheront les mêmes cases : cette partie-là reste le travail des critères ancrés décrits plus haut. Il garantit en revanche que deux personnes qui remplissent les mêmes cases obtiennent, sans aucune exception, le même score final et le même verdict. C'est la condition concrète qui rend une grille de QA éditoriale transmissible entre deux relecteurs, et pas seulement exploitable par celui qui l'a conçue.

Télécharger le gabarit de scoring (XLSX)

Ce gabarit s'inscrit dans le pilier éditorial d'OMKomUnity, aux côtés des autres ressources sur la production de contenu assistée par IA.

Questions fréquentes sur la grille de QA anti-détection IA

Avant de détecter contenu IA avec un outil tiers, ces sept questions reviennent systématiquement dans les échanges avec des équipes éditoriales sur ce sujet.

Un détecteur IA est-il fiable ?

Pas de façon constante. Les taux de précision publiés par les éditeurs de détecteurs varient fortement d'une source à l'autre, sans protocole indépendant qui permette de les comparer sérieusement. Vouloir détecter un contenu IA à partir d'un seul de ces scores revient à s'appuyer sur une mesure que personne, à ce jour, n'a validée de façon indépendante.

Le contenu généré par IA est-il pénalisé en SEO ?

Pas pour son origine. Le couple contenu généré par IA et SEO ne joue pas contre la façon dont un texte a été écrit. Il joue contre l'absence de contrôle qualité qui devrait suivre sa production, quelle que soit cette origine.

Une grille de QA peut-elle remplacer un relecteur expérimenté ?

Non, pas seule. Elle structure son jugement et le rend transmissible à un autre relecteur ; elle ne se substitue pas à l'expertise elle-même.

Qu'est-ce qui rend un critère de QA reproductible ?

Une absence d'ambiguïté totale. Deux relecteurs qui appliquent le même critère au même contenu doivent arriver au même verdict, sans dépendre de leur sensibilité personnelle.

Qu'est-ce que l'article 50 de l'AI Act change pour une équipe éditoriale ?

Des obligations de marquage et de transparence sur certains contenus générés ou manipulés par IA, applicables par étapes à partir du 2 août 2026 dans l'Union européenne. Une exception existe pour le contenu ayant fait l'objet d'une revue humaine responsable.

SynthID ou C2PA peuvent-ils servir de preuve de qualité éditoriale ?

Non, pas directement. Ces technologies prouvent une origine ou une manipulation du contenu, pas sa qualité. Une preuve de provenance et un contrôle éditorial répondent à deux questions différentes.

Pourquoi un tableur plutôt qu'une simple checklist pour le gabarit de scoring ?

Parce que le calcul du score total doit être identique entre deux personnes qui remplissent les mêmes cases. Une formule automatisée l'impose ; une addition à la main ne le garantit pas.

Un contrôle reproductible plutôt qu'un score de détecteur

La fiabilité d'un contenu ne se décide pas au moment où un détecteur affiche un pourcentage. Elle se construit en amont, par un contrôle que n'importe quel relecteur peut reproduire à l'identique sur le texte suivant. Une grille de QA anti-détection IA, au sens défendu ici, n'est d'ailleurs pas un détecteur de plus : c'est l'inverse, un contrôle qui ne cherche jamais à deviner l'origine d'un texte, seulement sa qualité et sa conformité. Pour une équipe qui publie à plusieurs mains ou avec assistance IA, c'est ce déplacement qui compte : ses critères bloquants restent clairement séparés des signaux faibles, et son calcul de score ne dépend de personne en particulier.

OMKomUnity accompagne les équipes éditoriales qui veulent construire cette grille sur mesure : les critères bloquants propres à leur corpus, la règle d'escalade qui va avec, et le gabarit qui rend le score reproductible d'un relecteur à l'autre.

Cette formation fait partie du parcours Éditorial at-scale de l'academy SEO/GEO d'OMKomUnity, qui recense toutes les formations déjà publiées.

Erlé Alberton

L'auteur

Erlé Alberton

Fondateur de OMKomUnity. Pilote agence et conseil sur SEO, GEO, architecture martech et orchestration IA marketing — studio pour l'exécution, expertise personnelle pour le cadrage, sans complexité inutile ni surcoût structurel.

SEO techniqueArchitectureGEOOrchestration IA

Partager cet article

Pour continuer

Recevoir les prochains articles

Une sélection, pas un flux : ce qui change quelque chose, et pourquoi.

En vous inscrivant, vous acceptez de recevoir nos e-mails. Conformément à la politique de confidentialité.

À lire aussi

Avant de partir

Besoin d'une grille de QA adaptée à votre contenu ?

Nous cadrons vos critères de contrôle qualité avant la mise à l'échelle, pour une production reproductible, quelle que soit la part d'assistance IA.