---
title: "Le banc d'essai de Meridal"
description: "Le banc d'essai de Meridal : soixante tâches de PME en français, six familles, le protocole de notation, et ce qui n'est pas encore mesuré. Aucun résultat."
url: https://meridal.fr/apprendre/banc-d-essai-de-meridal/
language: fr
written: 2026-10-31
verified: 2026-10-31
license: CC BY 4.0
---

[Learn](https://meridal.fr/apprendre/) › [Notions](https://meridal.fr/apprendre/notions/) › [Choix d'un modèle](https://meridal.fr/apprendre/dossier/modeles/)

- [← Avant Lecture d'un classement de modèles](https://meridal.fr/apprendre/lire-un-classement/)
- [→ Ensuite Fiche d'une sortie : Mistral Large 4](https://meridal.fr/apprendre/fiche-d-une-sortie-mistral-large-4/)

Décrypter · Niveau 3, Construire · 9 minutes

# Le banc d'essai de Meridal

Le banc d'essai que Meridal a conçu pour juger des modèles sur soixante tâches de PME en français : les six familles de tâches, la notation, ce qui est prêt et ce qui ne l'est pas. Il n'a pas encore été lancé : cette page ne contient aucun résultat.

Écrit le 31 octobre 2026 · Vérifié le 31 octobre 2026

## Vous saurez

- Dire ce que le banc d'essai mesurera, et ce qu'il ne mesurera pas
- Lire un protocole de notation avant ses résultats
- Construire un petit banc d'essai pour ses propres tâches

- [← Avant Lecture d'un classement de modèles](https://meridal.fr/apprendre/lire-un-classement/)
- [↑ Plus général La carte des acteurs de l'IA](https://meridal.fr/apprendre/acteurs-de-l-ia/)
- [↓ Plus concret Atelier : comparer trois modèles sur vos propres tâches](https://meridal.fr/apprendre/atelier-comparer-les-modeles/)
- [→ Ensuite Fiche d'une sortie : Mistral Large 4](https://meridal.fr/apprendre/fiche-d-une-sortie-mistral-large-4/)

Rappel de la page précédente

Répondez de tête, puis ouvrez. [Lire un classement de modèles](https://meridal.fr/apprendre/lire-un-classement/)

**1 Une note publiée par l'éditeur du modèle vaut-elle une note mesurée par un tiers ?**

Pas sans le dire : l'éditeur mesure avec ses propres réglages, souvent avec des outils et l'effort de raisonnement maximal. La carte des notes marque chaque mesure d'éditeur d'un coin.

**2 Deux modèles ont un point d'écart sur un test où tous dépassent 90 %. Lequel prendre ?**

Le test ne les départage plus : l'écart est du bruit. Il faut regarder les tests qui départagent encore, et surtout essayer les deux sur vos tâches.

L'essentiel

1. Le banc d'essai de Meridal n'a pas été lancé : aucun modèle n'a été testé, aucune note n'existe.
2. Ce qui existe : soixante tâches de PME en français, fabriquées, avec leur bonne réponse écrite avant tout appel, et un contrôle automatique qui les vérifie.
3. Les tâches se rangent en six familles de dix : lire un document, répondre avec des documents, rédiger, trier et décider, calculer, appliquer les règles françaises.
4. Ce qui manque : le budget des appels aux modèles et les clés d'accès, qui attendent la décision d'Oscar Grima.
5. Les résultats, quand ils existeront, vaudront pour ces soixante tâches : ils ne feront pas un classement général.

## Annonce

Les classements publics mesurent des savoirs, des mathématiques, du code ou des agents, le plus souvent en anglais. Aucun ne porte sur une tâche de PME en français. Meridal a donc conçu son propre banc d'essai.

Il n'a pas encore tourné. Cette page décrit ce qui est prêt, comme on lirait un protocole avant ses résultats, et sera réécrite le jour où un passage complet aura eu lieu.

## Éléments vérifiés

| Famille | Dix tâches | Comment on note | Quel contrôle |
|---|---|---|---|
| Lire un document | Factures, bon de commande, relevé bancaire, scan, avoir, acompte, facture étrangère | Chaque champ comparé à la bonne réponse, par du code | Automatique |
| Répondre avec des documents | Une question, trois à cinq passages internes, une citation exigée, parfois une contradiction ou une réponse absente | Citation vérifiée par du code, réponse par une grille | Automatique et grille |
| Rédiger | Relances de paiement, réponse à un client mécontent, compte rendu, résumé, réclamation, réponse à un avis | Contrôles automatiques et deux juges, d'éditeurs différents | Juges |
| Trier et décider | Dix tâches de cinq courriels : catégorie parmi neuf, urgence, transmission au dirigeant | La bonne catégorie, par du code | Automatique |
| Calculer | Ligne de facture fausse, total de tableur, écart de TVA, pénalités, marge, remboursement au prorata | Le chiffre juste et l'erreur repérée, par du code | Automatique |
| Les règles françaises | Délais de paiement, conservation comptable, bulletins de paie, mentions de la facture électronique, démarchage téléphonique | Réponse juste avec son texte de loi, non notée dans la première version | Source écrite |

Les soixante tâches sont fabriquées, et dites telles : les entreprises, les montants et les documents n'existent pas. Chaque bonne réponse est calculée par le même programme que le document, jamais recopiée à la main. Le contrôle vérifie que chaque bonne réponse obtient la note maximale. Il a été lancé le 31 octobre 2026 : soixante tâches, aucune faute.

Chaque tâche passera trois fois par modèle, pour voir si la réponse varie, avec le réglage par défaut de l'éditeur écrit à côté de la note. Onze tâches privées resteront hors du jeu publié, pour vérifier qu'un modèle n'a pas appris le jeu.

## Éléments non vérifiés

- **Aucune réponse de modèle** n'a été recueillie : ce que chaque modèle fait de ces tâches est inconnu.
- **Aucune note, aucun classement, aucun coût réel** n'existe.
- **Les adresses et les formes de requête de plusieurs éditeurs** sont tirées de leur documentation et du relevé du marché : un essai à blanc les confirmera ou les corrigera avant tout passage complet.
- **Les modèles testés** seront choisis dans le relevé du marché au moment du passage ; la liste de la première version n'est pas figée.

## Contexte

Un classement mesure ce qu'il mesure : voir [lire un classement de modèles](https://meridal.fr/apprendre/lire-un-classement/). La règle que le banc applique est la plus simple : on juge un outil sur ses propres cas. Le même geste est proposé au lecteur dans [le projet de banc d'évaluation](https://meridal.fr/apprendre/projet-banc-d-evaluation-de-modeles/) et dans [les jeux de tests](https://meridal.fr/apprendre/jeux-de-tests/).

## Position de Meridal

Position datée du 31 octobre 2026. Le banc d'essai ne sera lancé qu'après validation du budget des appels aux modèles par Oscar Grima. Quand il le sera, les réponses brutes seront publiées avec les notes, chaque note vaudra pour ces soixante tâches et aucune ne sera présentée comme un classement général.

## Révision de la position

Cette page sera réécrite au premier passage complet, avec les résultats, leur coût réel et leurs limites. Elle sera refaite à chaque relevé du marché qui change le haut du classement.

## Journal des mises à jour

- 31 octobre 2026 : page écrite, protocole et jeu de tâches prêts, aucun résultat.

## Lectures suivantes

↑ Plus général [La carte des acteurs de l'IA Comprendre · Niveau 1 · 10 minutes](https://meridal.fr/apprendre/acteurs-de-l-ia/)

← Avant [Lecture d'un classement de modèles Comprendre · Niveau 2 · 10 minutes](https://meridal.fr/apprendre/lire-un-classement/)

Vous êtes ici

Le banc d'essai de Meridal

→ Ensuite [Fiche d'une sortie : Mistral Large 4 Suivre · Niveau 2 · 8 minutes](https://meridal.fr/apprendre/fiche-d-une-sortie-mistral-large-4/)

↓ Plus concret [Atelier : comparer trois modèles sur vos propres tâches S'exercer · Niveau 2 · 60 minutes](https://meridal.fr/apprendre/atelier-comparer-les-modeles/)

[Tout le dossier « Choix d'un modèle »](https://meridal.fr/apprendre/dossier/modeles/)

Les pages qui renvoient ici

- [Atelier : comparer trois modèles sur vos propres tâches](https://meridal.fr/apprendre/atelier-comparer-les-modeles/)

**Limites et sources**

Aucun résultat n'est présenté, ni suggéré. Une note du banc, quand il existera, ne vaudra que pour les soixante tâches, dites fabriquées.

1. Les tâches et leur contrôle : dépôt de Meridal, dossier `apprendre/banc`, contrôle du 31 octobre 2026.

Écrit par Meridal, avec l'aide de l'IA ; chaque fait vérifié à sa source et relu avant publication. Texte et schémas sous licence [CC BY 4.0](https://creativecommons.org/licenses/by/4.0/deed.fr) : reprenez-les en citant Meridal. Le code sous licence MIT.

Service correspondant

Le diagnostic

Deux à cinq jours, 1 100 € à 4 250 € selon le nombre de services

[Voir le service](https://meridal.fr/offre/#diagnostic)

- [← Avant Lecture d'un classement de modèles](https://meridal.fr/apprendre/lire-un-classement/)
- [→ Ensuite Fiche d'une sortie : Mistral Large 4](https://meridal.fr/apprendre/fiche-d-une-sortie-mistral-large-4/)

## Un premier échange de 30 minutes

En visio et sans frais : vous décrivez votre situation, nous vous indiquons ce qui est réalisable, avec quels outils et pour quel ordre de prix. Vous pouvez aussi nous écrire ; chaque message reçoit une réponse écrite.

[Réserver 30 minutes](https://meridal.fr/contact/#reserver) [Écrire un message](https://meridal.fr/contact/)