Licences et attributions.
Nos sources ne sont pas libres de droit. Chacune porte une obligation, et voici où nous la tenons.
Une règle de lecture, qui n'a rien d'évident : on vérifie la licence du jeu de données, jamais celle du hub qui l'agrège. Un hub sous CC BY peut redistribuer des jeux qui gardent leur licence d'origine, et c'est celle du jeu qui s'applique. Terminal-Bench, qui alimente à lui seul nos mesures agentiques, nous arrive par Epoch AI et reste sous Apache 2.0.
Deux de ces licences imposent d'indiquer les modifications apportées. Nous en faisons, sur presque toutes nos sources : nous ne redistribuons pas leurs fichiers, nous en calculons des rangs, des centiles et des coûts. Chaque entrée le dit quand c'est le cas.
lmarena-ai/leaderboard-dataset
Sous licence CC BY 4.0.
Les notes de préférence humaine de neuf arènes, avec leur intervalle publié et leur rang.
Nous transformons cette donnée : nous en calculons des rangs, des centiles et des coûts mensuels. Les valeurs affichées ailleurs sur le site en sont dérivées, elles ne sont pas celles publiées par la source.
Epoch AI Benchmarking Hub
Sous licence CC BY 4.0.
Cinq jeux de mesures relayés par leur hub, dont nous tirons les valeurs de raisonnement, de mathématiques et de correction de bogues.
Nous transformons cette donnée : nous en calculons des rangs, des centiles et des coûts mensuels. Les valeurs affichées ailleurs sur le site en sont dérivées, elles ne sont pas celles publiées par la source.
Terminal-Bench
Sous licence Apache License 2.0.
Il porte à lui seul notre mesure de conduite d'un terminal, la seule de la catégorie agentique côté Epoch. Licence Apache 2.0 : nous en conservons la notice et signalons nos calculs.
Nous transformons cette donnée : nous en calculons des rangs, des centiles et des coûts mensuels. Les valeurs affichées ailleurs sur le site en sont dérivées, elles ne sont pas celles publiées par la source.
Fiction.liveBench
Pas de licence ouverte : accès régi par les conditions d'utilisation du service.
Relayé par Epoch AI, il porte notre mesure de compréhension d'un long texte. Sa licence propre reste à établir, et nous le disons plutôt que de la supposer.
Nous transformons cette donnée : nous en calculons des rangs, des centiles et des coûts mensuels. Les valeurs affichées ailleurs sur le site en sont dérivées, elles ne sont pas celles publiées par la source.
Classement d'hallucination
Sous licence Apache License 2.0.
Il départage les égalités sur « RAG, analyse documentaire » : la part des résumés fidèles au document fourni, mesurée automatiquement. Licence Apache 2.0, dont nous conservons la notice, et nous signalons nos calculs.
Nous transformons cette donnée : nous en calculons des rangs, des centiles et des coûts mensuels. Les valeurs affichées ailleurs sur le site en sont dérivées, elles ne sont pas celles publiées par la source.
tau²-bench
Sous licence MIT.
Il départage les égalités sur « Agent autonome » : un modèle outillé face à un utilisateur simulé, avec une politique à respecter. Licence MIT, dont nous conservons l'avis de copyright. Les résultats y sont déclaratifs, soumis par une organisation qui se nomme, et nous affichons laquelle à côté du chiffre.
Nous transformons cette donnée : nous en calculons des rangs, des centiles et des coûts mensuels. Les valeurs affichées ailleurs sur le site en sont dérivées, elles ne sont pas celles publiées par la source.
LiteLLM
Sous licence MIT.
Des tarifs et des caractéristiques de modèles, repris sans transformation.
models.dev
Sous licence MIT.
Des attributs descriptifs de modèles, repris sans transformation.
OpenRouter
Pas de licence ouverte : accès régi par les conditions d'utilisation du service.
Le catalogue, les fournisseurs et les prix, obtenus par leur API sous conditions contractuelles.
Nous transformons cette donnée : nous en calculons des rangs, des centiles et des coûts mensuels. Les valeurs affichées ailleurs sur le site en sont dérivées, elles ne sont pas celles publiées par la source.
Hugging Face Hub
Pas de licence ouverte : accès régi par les conditions d'utilisation du service.
Les métadonnées factuelles des modèles, poids ouverts et fenêtre de contexte. La licence dépend du jeu consulté, jamais du Hub.
Taux de référence de l'euro
Pas de licence ouverte : accès régi par les conditions d'utilisation du service.
Le taux de change quotidien qui convertit nos montants en euros, repris tel quel, avec sa date.
Notice MIT, reproduite telle quelle
Copyright (c) 2023 Berri AI
Permission is hereby granted, free of charge, to any person obtaining a copy
of this software and associated documentation files (the "Software"), to deal
in the Software without restriction, including without limitation the rights
to use, copy, modify, merge, publish, distribute, sublicense, and/or sell
copies of the Software, and to permit persons to whom the Software is
furnished to do so, subject to the following conditions:
The above copyright notice and this permission notice shall be included in all
copies or substantial portions of the Software.
THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR
IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY,
FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT. IN NO EVENT SHALL THE
AUTHORS OR COPYRIGHT HOLDERS BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER
LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM,
OUT OF OR IN CONNECTION WITH THE SOFTWARE OR OTHER DEALINGS IN THE SOFTWARE.
Le registre complet, avec l'état de chaque obligation, vit dans le dépôt du projet sous docs/LICENCES.md. Un test échoue si une source entre en base sans y figurer.