Aller au contenu

ComprendreNiveau 2, Pratiquer12 minutes

Effet de la formulation sur la réponse

Pourquoi deux demandes presque pareilles, ou la même demande posée deux fois, donnent deux réponses différentes : le calcul, la mise en forme, la place des informations, l'avis qu'on laisse voir, la langue. Ce que mesurent les études, ce que disent les éditeurs, et les réglages qui rendent une réponse stable.

Écrit le 9 octobre 2026 · Vérifié le 9 octobre 2026

Vous saurez

  • Comprendre pourquoi la réponse change avec la demande
  • Savoir ce qui pèse vraiment, et ce qui ne pèse presque pas
  • Écrire une demande dont la réponse tient
Sur cette page
  1. Rappel
  2. L'essentiel
  3. Problème
  4. Principe
  5. Fonctionnement
  6. Exemple détaillé
  7. Risques
  8. Mise en place
  9. Exercice
  10. Vérification
  11. Lectures suivantes
Rappel de la page précédente

Répondez de tête, puis ouvrez. Écrire une demande à une IA

1Quelles sont les cinq parties d'une bonne demande ?

Le contexte, la tâche, un exemple, le format, les critères. Seule la tâche est indispensable ; les autres rendent la réponse utilisable du premier coup.

2Vous joignez un rapport de trente pages et posez une question. Où placer la question ?

À la fin, après le document ; et demander de citer les passages sur lesquels la réponse s'appuie.

L'essentiel
  1. Un modèle écrit sa réponse token après token, chacun choisi d'après tout le texte qui précède : changer un mot, l'ordre ou la mise en forme de la demande change ce texte, donc la réponse.
  2. Même sans rien changer, la réponse varie : mille envois identiques à température 0 ont donné 80 réponses différentes.
  3. La mise en forme seule a fait varier la justesse de jusqu'à 76 points sur un modèle de 2023 ; une partie de l'écart tient à la façon de noter, mais fixer le format de réponse reste le réglage le plus sûr.
  4. Dans une longue demande, le milieu compte moins que le début et la fin ; une demande ciblée d'environ 300 tokens a fait mieux que toute la conversation, 113 000 tokens, dans toutes les familles de modèles testées.
  5. Votre avis déplace la réponse : suggérer une mauvaise réponse a fait perdre jusqu'à 27 % de justesse, et « Vous êtes sûr ? » fait changer d'avis entre 32 et 86 % du temps.
1

Problème

Deux collègues posent presque la même question à l'assistant et obtiennent deux réponses différentes ; le lendemain, la même personne en obtient une troisième. L'outil est-il peu fiable, ou l'un des deux a-t-il mieux demandé ?

Les éditeurs le reconnaissent eux-mêmes. Google écrit que reformuler une demande de même sens change souvent la réponse. Mistral prévient qu'un autre modèle, ou une simple mise à jour, peut changer la réponse à une même demande. Sans savoir ce qui fait bouger la réponse, une équipe ne sait ni à quelle réponse se fier, ni comment écrire une demande qui tient.

2

Principe

Un modèle de langage écrit sa réponse un token après l'autre. À chaque pas, il calcule la probabilité de chaque suite possible d'après tout le texte qui précède : votre demande, les documents joints, et le début de sa propre réponse. Tout ce qui change ce texte change ces probabilités. Et dès qu'un token diffère, tout ce qui suit s'écrit à partir de lui : un petit écart au départ peut donner une réponse entièrement différente.

Le phénomène descend jusqu'au calcul. Sans rien changer à la demande, Thinking Machines a obtenu 80 réponses différentes sur mille envois : la charge du serveur modifie l'ordre de certaines additions, et un écart infime suffit à faire choisir un autre token.

La même demande envoyée mille fois à température 0. Les 102 premiers tokens sont identiques dans les mille réponses. Au 103e, 992 réponses écrivent Queens, New York, et 8 écrivent New York City. Au bout du compte, 80 réponses différentes ; la plus fréquente revient 78 fois. La cause : la charge du serveur change l'ordre de certaines additions ; un écart infime fait choisir un autre token, et toute la suite en dépend.

Le réglage censé figer la réponse ne la fige donc pas. Anthropic et OpenAI écrivent que la température 0 ne garantit pas la même réponse ; Google écrit le contraire dans sa documentation. Sur les modèles d'Anthropic sortis après Claude Opus 4.6, la température n'est même plus réglable.

3

Fonctionnement

La mise en forme. Des changements sans effet sur le sens, un séparateur, une majuscule, un espace, ont fait varier la justesse de LLaMA-2-13B de jusqu'à 76 points ; sur GPT-3.5, l'écart médian entre formats équivalents était de 6,4 points, et le meilleur format d'un modèle n'est pas celui d'un autre. Deux études tempèrent : une bonne part de l'écart vient de la notation rigide des tests, et la sensibilité tient surtout aux modèles qui ne respectent pas le format de réponse demandé. D'où le réglage le plus sûr : écrire le format attendu. Sans cette consigne, GPT-4o perdait 8,6 points.

L'ordre des exemples. Les quatre mêmes exemples, rangés autrement, ont fait passer des modèles de 2021 du niveau des meilleurs à celui du hasard ; le bon ordre pour un modèle ne l'est pas pour un autre. Un modèle penche vers les réponses placées près de la fin de la demande et vers celles qu'il a souvent lues.

La place. Dans une longue demande, un modèle exploite mieux le début et la fin que le milieu. Avec vingt documents joints, GPT-3.5-Turbo répondait juste dans 75,8 % des cas quand le bon document venait en premier, 53,8 % quand il était au milieu : moins bien que sans aucun document.

La bonne réponse selon la place du bon document

50 %60 %70 %80 %90 %1er5e10e15e20esans aucun document, 56,1 %le seul bon document, 88,3 % Claude-1.3 GPT-3.5-Turbo place du document qui contient la réponse, parmi vingt
Questions dont la réponse se trouve dans un seul des vingt documents joints, environ 4 000 tokens. Au milieu, GPT-3.5-Turbo répond moins bien que sans aucun document. Modèles de 2023 ; Chroma retrouve la même pente sur 18 modèles en 2025.
Voir en tableau
Valeurs du graphique : Fonctionnement
Place du bon documentGPT-3.5-TurboClaude-1.3
1re sur 2075,8 %59,9 %
5e sur 2057,2 %55,9 %
10e sur 2053,8 %56,8 %
15e sur 2055,4 %57,2 %
20e sur 2063,2 %60,1 %
Sans aucun document56,1 %non publié ici
Le seul bon document88,3 %non publié ici

Les versions à long contexte ne faisaient pas mieux. En 2025, Chroma retrouve la dégradation sur 18 modèles : la même question, avec les mêmes faits, réussit mieux dans une demande ciblée d'environ 300 tokens que dans toute la conversation, 113 000 tokens, raisonnement activé compris ; un seul passage proche mais faux suffit à faire baisser le résultat.

Votre avis. Ajouter « je pense que la réponse est… » avec une mauvaise réponse a fait perdre jusqu'à 27 % de justesse ; après « Vous êtes sûr ? », les modèles changeaient leur réponse de 32 % du temps pour GPT-4 à 86 % pour Claude 1.3, plus souvent d'une réponse juste vers une fausse que l'inverse. La cause, selon les auteurs : dans les avis humains qui servent à dresser les modèles, les réponses qui vont dans le sens de l'utilisateur sont plus souvent préférées. En 2025, sur ChatGPT-4o, Claude Sonnet et Gemini 1.5 Pro, les modèles cédaient à une contradiction dans 58 % des cas.

La langue. Le français n'est pas toujours moins bien servi que l'anglais : sur le même test, GPT-4.1 y perd 4 points, DeepSeek-R1 en gagne près de 2. Anthropic mesure le français de Claude Sonnet 4.5 à 97,5 % de son anglais. Pour une question de culture, poser la question dans la langue du pays donne de meilleurs résultats que la traduire en anglais.

Le même test en anglais et en français

en anglais en français 55 %60 %65 %70 %75 %80 %85 %GPT-4.1DeepSeek-V3o4-miniQwen3-235B-ThinkDeepSeek-R1GPT-4o
MMLU-ProX, 2025 : les mêmes questions, traduites par machine puis relues par des experts, posées avec cinq exemples. Une partie des écarts peut tenir à la traduction ; les modèles de 2026 n'y figurent pas.
Voir en tableau
Valeurs du graphique : Fonctionnement
ModèleAnglaisFrançais
GPT-4.179,8 %75,7 %
DeepSeek-V379,6 %76,3 %
o4-mini73,7 %72,2 %
Qwen3-235B-Think80,7 %80,6 %
DeepSeek-R179,5 %81,3 %
GPT-4o59,9 %66,7 %

Le ton. « S'il vous plaît » ou « Je vous ordonne » : aucune différence d'ensemble sur GPT-4o et GPT-4o-mini ; mais de petits changements sans effet moyen ont déplacé la justesse d'une même question de 36 points vers le haut ou de 35 vers le bas.

4

Exemple détaillé

Une responsable des achats veut connaître la pénalité de retard prévue par le contrat d'un fournisseur. Exemple fabriqué. Sa première demande a quatre défauts : son avis en guise de question, la question avant les documents, six contrats au lieu d'un, et aucun format de réponse. Elle la réécrit.

Une demande avant et après. Avant : je pense que la pénalité de retard est de 1 % par semaine, tu confirmes ? suivi des six contrats du fournisseur. Après : le seul contrat concerné, en tête ; puis cite d'abord la clause sur les retards ; puis réponds : taux, article, plafond ; enfin la question, quelle est la pénalité de retard ? Les quatre changements : le seul document utile en tête, les citations avant la réponse, un format de réponse fixé, la question à la fin sans avis.

Chaque changement répond à une mesure ou à un conseil d'éditeur : le seul document utile parce qu'un passage proche mais faux fait baisser le résultat ; les citations d'abord et la question à la fin, comme le conseille Anthropic pour les longs documents ; un format fixé parce que son absence coûte des points ; et pas d'avis, parce qu'il entraîne la réponse.

La demande, après
[Collez ici le contrat concerné, et lui seul.]

Dans le contrat ci-dessus, cite d'abord, mot pour mot, la ou les clauses qui traitent des retards de livraison.

Puis réponds dans ce format :
Taux de pénalité :
Article :
Plafond :
Si le contrat ne prévoit pas de pénalité de retard, écris « Non prévu ».

Quelle est la pénalité de retard de livraison prévue par ce contrat ?

Le contrôle. Elle pose la demande deux fois, dans deux conversations neuves. Si les deux réponses concordent et que la clause citée dit bien ce taux, elle retient la réponse ; sinon, elle lit l'article cité. Deux réponses différentes sont un signal : la réponse n'est pas sûre.

5

Risques

Risques
Ce qu'on se ditCe que montrent les mesuresCe qu'on fait
« Une demande qui a marché marchera toujours »La réponse varie d'un envoi à l'autre, et d'une version du modèle à l'autre ; OpenAI change sa configuration de service plusieurs fois par anRetester ses demandes clés à chaque changement de modèle
« Plus j'en joins, mieux c'est »300 tokens ciblés font mieux que 113 000 ; un passage proche mais faux suffit à tromperNe joindre que l'utile
« Je donne la réponse attendue, ça va plus vite »Jusqu'à 27 % de justesse en moins avec une mauvaise pisteTaire son avis
« Je vérifie en demandant s'il est sûr »Le modèle change d'avis, plus souvent vers le faux que vers le justeDemander la citation, pas une confirmation
« Il existe une formule magique »Pourboires et menaces : aucun effet d'ensemble ; 162 rôles testés sur des modèles ouverts : aucun gain de justesseSoigner le contexte et le format plutôt que la formule
6

Mise en place

La demande qui tient, dans l'ordre. Un : le document utile, et lui seul ; un passage proche mais faux trompe le modèle. Deux : les citations demandées d'abord, pour vérifier à la source. Trois : le format de la réponse ; sans lui, GPT-4o perdait 8,6 points. Quatre : la langue de la réponse, comme le conseille Anthropic. Cinq : la question, à la fin et sans votre avis. Puis poser deux fois ce qui compte, et retester à chaque nouveau modèle.
  1. Écrire le format de la réponse : les rubriques, l'ordre, la longueur.
  2. Mettre le document en tête et la question à la fin, comme le conseillent Anthropic et Google ; pour un très long document, répéter la consigne au début et à la fin, comme le conseille OpenAI.
  3. Ne joindre que l'utile : le bon contrat, la bonne période, pas tout le dossier.
  4. Demander les citations avant la réponse, pour pouvoir vérifier à la source.
  5. Taire votre avis, et vérifier par la source plutôt que par « Vous êtes sûr ? ».
  6. Poser deux fois ce qui compte, dans deux conversations : deux réponses différentes signalent une réponse incertaine.
  7. Écrire la langue de la réponse, comme le conseille Anthropic ; pour une question propre à la France, la poser en français.
  8. Garder ses demandes clés dans un fichier et les retester à chaque nouveau modèle.

Les techniques qui vont plus loin, exemples, rôles, critères et étapes : les demandes avancées.

7

Exercice

Pourquoi deux réponses, et comment obtenir la bonne ?

La situation · fabriquée pour l'exercice

Un chargé de clientèle colle dans l'assistant trois ans de courriels avec un client, après avoir écrit en tête : « Je crois qu'il a déjà eu un geste commercial l'an dernier, tu peux me le confirmer ? » L'assistant confirme. Le lendemain, son collègue pose la question autrement et obtient « non ».

Ouvrir la correction

L'avis« Je crois que » pousse à confirmer : poser la question sans hypothèse.

Le volume et la placeTrois ans de courriels, la bonne information peut se perdre au milieu : ne joindre que la période utile, et mettre la question à la fin.

La preuveDemander de citer le courriel, avec sa date et son expéditeur.

Le désaccordDeux réponses opposées disent que la réponse n'est pas sûre : vérifier dans la messagerie avant de répondre au client.

8

Vérification

1ComprendrePourquoi la même demande peut-elle donner deux réponses différentes, même sans rien y changer ?

Parce que le modèle écrit token après token, chacun d'après tout ce qui précède : un écart infime dans le calcul, dû à la charge du serveur, peut faire choisir un autre token, et toute la suite en dépend. Mille envois identiques ont donné 80 réponses différentes.

2ComprendreOù placer la question dans une demande qui joint un long document, et pourquoi ?

À la fin, après le document, et la répéter au début s'il est très long : un modèle exploite mieux le début et la fin d'une demande que le milieu.

3AppliquerUne réponse de l'assistant vous paraît douteuse. Que faites-vous plutôt que de demander « Vous êtes sûr ? » ?

Demander la citation exacte du passage qui fonde la réponse, ou reposer la question dans une conversation neuve, sans donner votre avis. « Vous êtes sûr ? » fait abandonner des réponses justes.

9

Lectures suivantes

↑ Plus général

Rien avant : c'est un point de départ.

Vous êtes ici

Effet de la formulation sur la réponse

Tout le dossier « Usage quotidien »

Les pages qui renvoient ici

    Limites et sources

    La plupart des mesures portent sur des modèles de 2021 à 2025 ; aucune étude lue ne mesure la sensibilité à la mise en forme sur les modèles de 2026.

    L'expérience des mille envois porte sur un modèle ouvert servi par ses auteurs ; on ne sait pas comment les grands éditeurs servent les leurs.

    Les écarts entre l'anglais et le français viennent d'un test traduit ; une partie peut tenir à la traduction.

    L'exemple et l'exercice sont fabriqués.

    1. Thinking Machines, le hasard du calcul ; Sclar et al., la mise en forme ; Hua et al., la notation ; Liu et al., Lost in the Middle ; Chroma, Context Rot ; Sharma et al., la complaisance ; MMLU-ProX ; Anthropic, bonnes pratiques ; Google, stratégies de demande ; OpenAI, guide de GPT-4.1.
    2. Le relevé : apprendre/recherches/2026-10-09-demandes.json, partagé avec la page des demandes avancées.

    Écrit par Meridal, avec l'aide de l'IA ; chaque fait vérifié à sa source et relu avant publication. Texte et schémas sous licence CC BY 4.0 : reprenez-les en citant Meridal. Le code sous licence MIT.

    Service correspondant

    Former vos équipes, et vous

    Une demi-journée à deux journées, 550 € à 3 400 €

    Voir le service

    Un premier échange de 30 minutes

    En visio et sans frais : vous décrivez votre situation, nous vous indiquons ce qui est réalisable, avec quels outils et pour quel ordre de prix. Vous pouvez aussi nous écrire ; chaque message reçoit une réponse écrite.