Vérifier une réponse de Claude avant de s'en servir

Une réponse de Claude ne se vérifie pas en lui redemandant si elle est sûre d'elle. La méthode qui fonctionne consiste à isoler chaque affirmation vérifiable de la réponse, à la retrouver dans un document que vous possédez déjà, puis à faire relire le résultat par une personne avant tout envoi à un client, un dirigeant ou une administration. Rien dans le ton d'une réponse ne distingue une invention d'une réponse exacte : les deux sont formulées avec la même assurance.

Ce constat revient dans la quasi totalité des sessions de formation animées en entreprise sur l'usage de Claude. Le réflexe naturel consiste à juger une réponse à sa fluidité ou à sa cohérence apparente. Ce réflexe échoue précisément sur les hallucinations, puisqu'une affirmation fausse peut être tout aussi fluide et cohérente qu'une affirmation exacte. La suite de cet article détaille une procédure de contrôle en cinq étapes, applicable avant de transmettre un document produit avec Claude.

1. Pourquoi une réponse fausse ressemble en tout point à une réponse juste

Un modèle de langage ne "sait" pas quand il invente. Il produit la suite de mots la plus probable compte tenu du contexte, et cette suite de mots peut très bien correspondre à un fait réel ou à une affirmation totalement fabriquée, sans que la formulation change de nature entre les deux cas.

C'est ce qui rend la vérification indispensable et distincte d'une simple relecture de style. On ne cherche pas des fautes ou des maladresses : on cherche des affirmations qui n'existent nulle part ailleurs que dans la réponse elle-même. Notre article sur l'IA honnête et l'alignement du modèle détaille pourquoi un modèle peut se montrer confiant sur un sujet qu'il maîtrise mal, et pourquoi cette confiance affichée ne constitue jamais une preuve de justesse.

Une étude de Stanford RegLab et Stanford HAI, publiée en janvier 2024, a mesuré un taux d'erreur de 69 % à 88 % sur des questions juridiques factuelles vérifiables, selon les modèles testés à cette date. Le chiffre exact varie avec chaque génération de modèle, mais l'observation de fond reste valable aujourd'hui : plus une question porte sur un détail précis et vérifiable, plus le risque d'erreur augmente, sans que la formulation de la réponse ne le laisse deviner.

2. Les six endroits où l'erreur se loge le plus souvent

Sur l'ensemble d'un document produit avec Claude, l'erreur ne se répartit pas de façon uniforme. Elle se concentre sur des catégories précises, qu'il vaut mieux contrôler en priorité plutôt que de relire le texte dans son intégralité au même niveau d'attention.

• Les chiffres : montants, pourcentages, effectifs, délais. Un chiffre faux passe souvent inaperçu parce qu'il reste dans un ordre de grandeur plausible.
• Les dates : entrée en vigueur d'un texte, échéance contractuelle, date d'un événement cité. Une date décalée de quelques mois change parfois le sens juridique d'une affirmation.
• Les références normatives ou réglementaires : numéro d'article, nom d'une norme, intitulé exact d'un texte de loi. Ces références sont souvent proches d'une référence réelle, ce qui les rend difficiles à repérer sans vérification directe.
• Les noms propres : personnes, organismes, entreprises. Un nom légèrement déformé ou une fonction mal attribuée passe facilement une relecture rapide.
• Les citations : une phrase attribuée à une personne ou à un document, reformulée ou légèrement modifiée par rapport à l'original.
• Les liens : une adresse qui ne mène nulle part, ou qui mène vers une page qui ne contient pas l'information annoncée.

Ces six catégories couvrent l'essentiel des erreurs rencontrées dans un usage professionnel courant : rapport, note interne, réponse à un appel d'offres, courrier destiné à une administration. Elles forment le socle de la procédure de vérification qui suit.

3. La procédure de vérification en cinq étapes

Cette procédure s'applique à tout document produit avec Claude avant sa diffusion, quel que soit le format final (email, rapport, réponse à un client, dossier administratif).

1. Isoler chaque affirmation vérifiable. Parcourez le texte et repérez tout ce qui relève d'un fait contrôlable : un chiffre, une date, une référence, un nom, une citation, un lien. Le reste (formulations, transitions, mise en forme) ne demande pas le même niveau de contrôle.
2. Appliquer la règle du document source. Une affirmation vérifiable doit pouvoir être retrouvée dans un document que vous possédez : contrat, référentiel interne, texte officiel, échange écrit. Si elle ne l'est pas, elle n'est pas utilisable en l'état, quelle que soit sa plausibilité.
3. Ouvrir la source, pas seulement la demander. Demander à Claude ses sources ne suffit pas : il faut ouvrir le document cité et confirmer qu'il dit bien ce qui lui est attribué. Une source réelle peut être citée à tort, ou son contenu peut avoir été légèrement déformé dans la reformulation.
4. Vérifier par échantillon si le volume est important. Sur un document long, une relecture intégrale ligne à ligne devient rarement tenable. Un échantillon représentatif couvre plusieurs zones du texte, pas uniquement le début, inclut les passages les plus techniques ou les plus chiffrés, et mélange vérification aléatoire et vérification ciblée sur les points à plus fort enjeu.
5. Reformuler la question et comparer les deux réponses. Redemander la même information autrement fait apparaître les points instables : si la réponse change de façon significative entre les deux formulations, c'est le signal qu'elle repose sur une base fragile plutôt que sur un fait établi.

4. Vérifier un sujet qu'on ne maîtrise pas soi même

La difficulté principale n'est pas de vérifier un sujet qu'on connaît bien : sur ce terrain, une erreur saute souvent aux yeux. La difficulté est de vérifier un sujet sur lequel on n'a pas soi même l'expertise nécessaire pour juger si une affirmation est plausible.

Le réflexe qui ne suffit pas : demander les sources

Beaucoup s'arrêtent à cette étape, en pensant qu'une réponse accompagnée de sources est de facto vérifiée. Ce n'est pas le cas. Une source peut être réelle, correctement orthographiée, et pourtant ne pas dire ce que la réponse lui attribue. La seule façon de le savoir est d'ouvrir la source et de lire le passage concerné, ce qui ne demande pas d'expertise du sujet, seulement de la lecture attentive.

S'appuyer sur des documents plutôt que sur son jugement

Sans expertise, le jugement personnel sur la plausibilité d'une affirmation n'est pas un critère fiable. Le critère qui fonctionne reste toujours le même : l'affirmation est elle retrouvable dans un document source, oui ou non. À défaut d'expertise interne, une deuxième source (un collègue qui connaît le sujet, un texte officiel, une donnée déjà validée par l'entreprise) remplace le jugement personnel. Un chiffre qui ne peut être recoupé nulle part se retire du document, il ne se garde pas "au bénéfice du doute".

5. La reformulation, un test simple pour repérer ce qui est instable

Poser la même question sous deux formulations différentes et comparer les deux réponses est un test rapide, indépendant de l'expertise du sujet. Si les deux réponses convergent sur les mêmes chiffres, dates et références, la probabilité que l'information soit correcte augmente. Si elles divergent, cela signale un point qui mérite une vérification directe dans une source, plutôt qu'un arbitrage entre les deux versions.

Cette technique rejoint une règle plus générale sur la manière de formuler une demande à Claude : plus une question est précise et cadrée, plus la réponse a de chances d'être ancrée sur des éléments vérifiables. Notre guide sur comment rédiger un bon prompt détaille comment construire une demande qui réduit ce risque en amont, avant même la phase de vérification.

La documentation officielle d'Anthropic sur la réduction des hallucinations recommande une approche proche : donner explicitement à Claude la permission d'exprimer une incertitude, et lui demander de citer des extraits exacts du document source avant de répondre, plutôt que de reformuler de mémoire. Ces réglages réduisent le risque en amont, ils ne remplacent pas la vérification en aval.

6. Qui valide, et ce qui ne part jamais sans validation humaine

Une fois la procédure de vérification appliquée, une question organisationnelle reste entière : qui porte la responsabilité finale avant l'envoi du document.

Qui relit, selon l'enjeu du document

Sur un document interne à faible enjeu, l'auteur de la demande peut suffire à la relecture. Sur un document technique, réglementaire ou destiné à un client, la relecture revient à la personne qui maîtrise réellement le sujet, pas à celle qui a simplement formulé la demande à Claude. C'est cette personne qui engage sa signature ou celle de l'entreprise, elle doit donc être en mesure de justifier chaque affirmation retenue.

Ce qui ne sort jamais sans validation, quel que soit le degré de confiance

Certains documents ne quittent jamais l'entreprise sans une validation humaine explicite, indépendamment de la qualité apparente de la réponse produite : un document contractuel, une réponse officielle à une administration, un chiffre communiqué à un investisseur ou intégré à un rapport financier. Fixer cette liste à l'avance, avant qu'un cas concret ne se présente sous pression de délai, évite l'arbitrage improvisé au moment où l'erreur a le plus de chances de passer inaperçue. Cette liste recoupe largement celle d'une charte d'usage de Claude en entreprise, qui fixe par avance les données et les documents qui ne doivent jamais y entrer sans validation.

Ce cadre de validation est d'autant plus simple à tenir lorsque Claude travaille directement sur les documents internes de l'entreprise plutôt que sur sa mémoire générale. Une connexion structurée via le Model Context Protocol en entreprise permet à Claude de répondre à partir de vos contrats, procédures et référentiels réels, ce qui rapproche mécaniquement chaque affirmation de sa source et facilite la vérification décrite plus haut.

Former les équipes à cette discipline de vérification change davantage l'adoption de Claude en équipe qu'un réglage technique isolé : c'est un réflexe qui se construit avec de la pratique répétée sur des documents réels, avec un retour direct sur ce qui a été mal vérifié une première fois.

Pour aller plus loin

• formation Claude avancée : deux jours pour installer ces réflexes de vérification directement sur vos documents et vos cas d'usage réels.
• IA honnête et alignement du modèle en entreprise : comprendre pourquoi un modèle peut se montrer confiant sur une réponse fausse.
• Model Context Protocol en entreprise : connecter Claude à vos documents internes pour rapprocher chaque réponse de sa source.
• Comment rédiger un bon prompt : réduire le risque d'erreur en amont, avant même la phase de vérification.
• Relire du code produit par un agent : la même discipline de contrôle appliquée au code plutôt qu'au texte.