Pourquoi un métier rare révèle mieux les angles morts de l'IA
Choisissez un métier que vous connaissez et qui n'existe presque pas sous forme écrite : quelques pages, un vocabulaire transmis à l'oral, des gestes que personne n'a documentés. Un assistant de rédaction ne vous signale pas qu'il manque de matière. Il produit un texte fluide, et c'est à vous de repérer ce qui a été comblé.
La restauration de cloches sert ici d'exemple parce qu'elle est à la fois concrète et peu banale : les approximations y sautent aux yeux d'une personne qui connaît un métier artisanal. L'objectif n'est pas de piéger l'outil, mais d'obtenir un document de travail : la liste écrite de ce qu'il faudra lui fournir systématiquement.
La méthode en quatre temps : générer, annoter, qualifier, corriger
Premier temps, la génération à nu : vous demandez une présentation du métier en une page, sans joindre le moindre document et sans corriger en route. Deuxième temps, l'annotation : vous relisez phrase par phrase et marquez chaque élément que vous ne pourriez pas défendre devant un pair. Troisième temps, la qualification : vous classez chaque marque dans une famille du tableau ci-dessous. Quatrième temps, la correction : vous réécrivez la phrase, ou vous la supprimez.
Pour le second passage, changez la consigne. La documentation Anthropic sur la réduction des hallucinations décrit trois leviers : autoriser le modèle à répondre qu'il n'a pas assez d'éléments, lui faire extraire des citations exactes des documents fournis avant de rédiger, et lui interdire de s'appuyer sur ses connaissances générales en dehors de ces documents. Cela donne une consigne du type : n'utilise que mes notes ci-dessous et signale tout point qui n'y figure pas.
- Une page maximum : un texte long dilue l'attention de relecture.
- Annotez sur le texte, pas de mémoire, et gardez la version non corrigée comme point de comparaison.
- N'employez qu'un jeu de données fictif : aucune information confidentielle ni donnée personnelle.
| Type de comblement | Indice repérable dans le texte | Action de correction |
|---|---|---|
| Outil ou matériau inventé | Appareil générique, marque invérifiable, matière citée sans précision | Remplacer par l'outil réellement employé, ou retirer la mention |
| Geste décrit de façon vague | Verbes passe-partout : traiter, intervenir, remettre en état | Décrire l'opération en une phrase qu'un pair pourrait valider |
| Chiffre non sourcé | Durée, fréquence ou poids avancé sans origine | Supprimer le chiffre, ou le remplacer par votre propre relevé |
| Terme d'un métier voisin | Vocabulaire de la serrurerie, de l'horlogerie, du bâtiment | Rétablir le terme de votre métier et l'inscrire au glossaire |
Mise en situation entièrement fictive
L'exemple est inventé de bout en bout. Un atelier fictif de deux personnes, sans nom ni localisation, restaure des cloches et leurs supports, et veut publier une page de présentation. Le texte obtenu sans aucun document — fictif lui aussi — évoque un diagnostic acoustique mené au moyen d'un capteur spécialisé, un décapage réalisé en trois jours et un remontage confié au serrurier de l'atelier.
La relecture annotée donne trois marques. Le capteur relève du comblement d'outil : rien n'indique qu'il soit employé ici, la mention part. Les trois jours sont un chiffre non sourcé : l'atelier fictif ne tient pas ce relevé, le chiffre disparaît. Le mot serrurier vient d'un métier voisin ; l'atelier emploie un autre terme, qui rejoint le glossaire avec sa définition en une ligne. Le second passage, nourri de ces notes, produit un texte plus court : c'est le résultat attendu.
Deux façons de formuler la même demande
Le même sujet, confié au même modèle, ne donne pas le même texte selon le cadrage de la demande. Comparez les deux formulations sur votre propre métier : la différence se lit dans le volume de détails non vérifiables.
| Formulation de la demande | Ce que le modèle tend à produire | Ce que vous pouvez en garder |
|---|---|---|
| Présente mon métier de façon attractive | Un texte fluide, avec outils, étapes et chiffres plausibles mais non vérifiés | La structure et le rythme des phrases, rarement le contenu factuel |
| Rédige à partir de mes seules notes, signale tout élément manquant | Un texte plus court, avec des manques explicitement signalés | Presque tout le contenu, plus la liste des trous à combler vous-même |
Les erreurs fréquentes dans cet exercice
La première erreur consiste à corriger pendant la génération : c'est le texte non corrigé qui contient le relevé. La deuxième est de s'arrêter à une impression générale, du type « ce n'est pas bon », sans rien annoter : rien ne sera réutilisable la semaine suivante.
La troisième touche les chiffres : un chiffre produit par un modèle peut être plausible et faux, et mérite le même traitement qu'une affirmation non sourcée. La quatrième est de conclure que l'outil est inutilisable sur un métier rare : il reste utile pour structurer, raccourcir, décliner, à condition de lui fournir la matière. La cinquième est d'oublier ce que rappelle la documentation Anthropic : ces techniques réduisent les hallucinations sans les éliminer, et les informations critiques restent à valider.
Du relevé au glossaire que vous réutilisez
Le livrable tient en une page : d'un côté les termes de votre métier avec leur définition en une ligne, de l'autre ceux à ne jamais employer, avec leur remplaçant. Cette page se place en tête de chaque demande à l'IA et sert de grille de relecture à toute personne qui publie en votre nom. La formation IA Marketing prolonge ce travail du côté de la production de contenus avec l'IA.
Questions fréquentes
Pourquoi choisir un métier aussi rare que restaurateur de cloches ?
Sur un métier très documenté, le texte paraît correct et les approximations passent inaperçues. Un sujet rare rend visibles les éléments que le modèle complète de lui-même.
Faut-il vraiment commencer sans fournir de documents à l'IA ?
Oui pour le premier passage : c'est le contraste avec votre relecture qui produit le relevé. Aux passages suivants, vous fournissez vos notes et demandez au modèle de s'y limiter.
Que faire des chiffres produits par le modèle ?
Traitez-les comme non vérifiés par défaut et retirez-les du texte. S'il vous en faut un, remplacez-le par votre propre relevé interne ou par une source que vous pouvez citer.
Cet exercice remplace-t-il la relecture humaine des contenus ?
Non, il l'organise en indiquant où regarder en priorité. La responsabilité de ce qui est publié reste celle de l'entreprise, quel que soit l'outil utilisé pour rédiger.
Repères et limites
Cet article décrit un exercice d'entraînement. Le métier de restaurateur de cloches y sert d'exemple volontairement rare : les éléments de description cités sont fictifs et ne documentent pas cette activité. N'utilisez qu'un jeu de données fictif et ne saisissez aucune information confidentielle ni donnée personnelle. Le relevé obtenu dépend du modèle, de sa version et de la formulation employée, et varie d'une session à l'autre.
Sources et ressources
Donnez une suite concrète à votre projet.
Consultez le parcours « IA Marketing » et ses modalités pour préparer votre échange avec notre équipe.
Demander le programme par e-mailVotre messagerie s’ouvre avec la formation et l’article préremplis. Envoyez ensuite votre demande à justine.schub@gmail.com.
Consulter le programme →