Tâches / RAG

RAG.

Répondre à partir des documents que vous fournissez.

Les recommandations WoBench reposent sur des évaluations humaines.

contexte d'au moins 128 000 tokens taux de réponse d'au moins 95 %
Mis à jour le 23 septembre 2026 à 17h30
321 modèles évalués
méthode, version 2
Petit Moyen Gros

Service client documenté. 12 000 tokens en entrée et 600 en sortie par exécution

Hébergement Poids ouverts Auto-hébergeable Hébergement en UE

Filtre actif : Poids ouverts. 271 modèles du banc retirés du calcul, les trois verdicts sont recalculés sur le reste. Retirer le filtre Selon nos vérifications du 6 septembre 2026, saisies à la main fournisseur par fournisseur. Ce n'est pas une garantie.

Verdicts rendus parmi les 3 modèles mesurés sur ce que cette tâche exige, sur 321 au banc. Les 318 autres

0 modèles au niveau sur 3 mesurés, 321 au banc.

montants convertis au taux de la Banque centrale européenne du 23 septembre 2026

Pas assez de mesures publiques pour rendre un verdict sur cette tâche. Les populations ci dessous disent ce que nous savons, et ce que nous ne savons pas.

pas assez de mesures publiques : 3 modèles mesurés sur 11 exigés

Le spectre des prix compare tous les modèles au niveau de chaque tâche. Il ne tient pas compte du filtre d'hébergement, il est donc masqué tant que ce filtre est actif.

Arrivés au niveau

Aucun modèle au niveau n'a reçu sa première note depuis moins de 45 jours.

Voir ce qui a changé

Cette tâche exige une note d'au moins 1 471,7 sur préférence humaine sur des documents, arène Document de LMArena. Cette barre appartient à la mesure, elle ne bouge pas, et toutes les tâches qui lisent cette mesure exigent la même : c'est la note du modèle qui la franchit, donc le doute lui profite.

Comment ce verdict est calculé

Le seuil de cette tâche

préférence humaine sur des documents, arène Document de LMArena

Barre de la mesure, borne basse : 1 458,8. Fourchette sans fourchette publiée, posée le 23 septembre 2026 sur 29 modèles, inchangée depuis.

Seconde mesure : fidélité au document fourni, mesurée par le modèle HHEM de Vectara

Barrières

  • contexte d'au moins 128 000 tokens
  • taux de réponse d'au moins 95 %

Coût mensuel = entrée hors cache × prix d'entrée + entrée en cache × prix du cache + sortie × prix de sortie. L'écriture de cache est exclue en V1.

Sources de cette page

D'où viennent ces chiffres

Prix relevés une fois par jour, à 3h00 (heure de Paris). Licences, attributions et modifications

Ces chiffres viennent des sources publiques citées et reflètent le dernier import, pas l'état à la seconde. Les tarifs sont ceux publiés par les fournisseurs et peuvent changer sans préavis : vérifiez les chez eux avant de vous engager. Nos verdicts orientent un choix, ils ne le garantissent pas : à vous de tester le modèle sur vos propres cas et de valider votre calcul, y compris économique. Notre méthode

Tous les modèles mesurés

Le classement entier sur préférence humaine sur des documents, arène Document de LMArena, du meilleur au moins bon, avec la barre à sa place. La note garantie est la borne basse de la fourchette publiée : c'est elle qui décide de l'élection.

La barre vaut 1 471,7, sa fourchette va de sans fourchette publiée, et c'est sa borne basse, 1 458,8, qui coupe. Elle a été posée le 23 septembre 2026 sur 29 modèles, et n'a pas bougé depuis.

Rang Modèle Note Fourchette Coût mensuel Sort
La coupure : un modèle est au niveau quand sa borne haute atteint 1 458,8. Au dessus, les modèles au niveau ; en dessous, les autres.
1 Kimi K2.6
Moonshot AI
 1 450,7 1 443,1 à 1 458,4 1 164 € sous la barre
2 MiniMax M3
MiniMax
 1 434,8 1 426,5 à 1 443,1 484,59 € sous la barre
3 Gemma 4 31B
Google
 1 424,5 1 416,7 à 1 432,3 199,81 € sous la barre

Ce que devient le banc sur cette tâche

Les cinq populations forment une partition du banc : leur somme vaut le nombre de modèles au banc, sur chaque tâche, à chaque calcul.

  • contexte d'au moins 128 000 tokens : 1 modèle(s) écarté(s)
  • taux de réponse d'au moins 95 % : 3 modèle(s) écarté(s)

Pourquoi ce minimum. Un taux d'hallucination ne se compare pas entre deux modèles qui ne répondent pas autant : celui qui se tait n'invente rien, et il gagnerait le classement en refusant de servir. Gemma 3 4B, deuxième sur la fidélité au document, ne répond qu'à 67,3 % des documents. La barrière écarte donc avant que la mesure ne départage. Ce que ce minimum coûte à assumer : il est une décision humaine, pas un résultat, et la source ne publie aucun intervalle, donc deux fidélités sont à égalité quand leur écart passe sous la tolérance globale. Relevé du 7 septembre 2026 : 3 modèles sont sous 90 % de réponses, 12 sous 95 %, 19 sous 98 %, et le choix entre ces trois valeurs ne déplace aucun verdict.

4 modèles écartés par une barrière
  • DeepSeek V3.2 : taux de réponse d'au moins 95 %
  • Gemma 3 4B : taux de réponse d'au moins 95 %
  • Kimi K2.5 : taux de réponse d'au moins 95 %
  • R1 : contexte d'au moins 128 000 tokens
0 modèle mesuré et éligible

aucun

3 modèles mesurés sous le seuil
  • Gemma 4 31B : 1 424,5, sous la barre sur cette mesure, dont la borne basse est à 1 458,8
  • Kimi K2.6 : 1 450,7, sous la barre sur cette mesure, dont la borne basse est à 1 458,8
  • MiniMax M3 : 1 434,8, sous la barre sur cette mesure, dont la borne basse est à 1 458,8
35 modèles non mesurés
  • Command R (08-2024) : 378,58 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Command R+ (08-2024) : 6 310 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Command R7B (12-2024) : 94,65 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • DeepSeek V3 : 649,55 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • DeepSeek V4 Flash 0423 : 157,26 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • DeepSeek V4 Flash 0731 : 95,45 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • DeepSeek V4 Pro 0423 : 1 658 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Gemma 3 12B : 120,94 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Gemma 3 27B : 185,08 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Gemma 4 26B A4B : 111,47 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Hy3 : 270,69 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Hy3 preview : 365,96 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Inkling : 1 926 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Inkling Small : 851,81 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Kimi K2 Thinking : 1 241 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Kimi K2.7 Code : 1 454 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Kimi K3 : 4 328 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Laguna XS 2.1 : 119,88 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • MiMo-V2.5 : 201,84 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • MiMo-V2.5-Pro : 514,11 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • MiniMax M2 : 586,80 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • MiniMax M2.1 : 586,80 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • MiniMax M2.5 : 516,34 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • MiniMax M2.7 : 424,01 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Muse Glimmer 30B : 582,60 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Nemotron 3 Nano 30B A3B : 113,57 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Nemotron 3 Super : 215,58 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Nemotron 3 Ultra : 1 367 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Nemotron 3.5 Content Safety : 441,68 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Step 3.5 Flash : 241,87 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Step 3.7 Flash : 352,50 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Trinity Large Thinking : 490,05 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • gpt-oss-120b : 80,97 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • gpt-oss-20b : 47,32 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • gpt-oss-safeguard-20b : 165,63 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
8 modèles récents, pas encore mesurés
  • DeepSeek V4 Flash Vision Exp : 389,77 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • DeepSeek V4 Pro 0813 : 723,06 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • DeepSeek V4.1 Flash : 242,96 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Hy4 preview : 1 517 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • MiMo-V2.6-Flash : 237,33 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • MiMo-V2.6-Pro : 734,20 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • MiMo-V2.6-Pro-UltraSpeed : 7 342 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena
  • Nemotron 3.5 Lightning : 149,33 € par mois, non mesuré sur préférence humaine sur des documents, arène Document de LMArena