1
Normalisation
Pour chaque benchmark, le score est ramené sur 100 : (score − plancher) / (meilleur − plancher). Le plancher est le niveau du hasard (25 % pour GPQA, 10 % pour MMMU-Pro, 1000 Elo pour GDPval, 0 sinon). Le meilleur modèle suivi obtient 100.
2
Catégories
Les 14 benchmarks sont regroupés en 7 catégories. Dans chacune, la moyenne est pondérée : les épreuves les plus discriminantes (HLE, FrontierMath Tier 4, FrontierSWE, GDPval) pèsent 1,5×, ARC-AGI-3 1,25×, les tests saturés (GPQA) 0,5×, les autres 1×.
3
Score global
Moyenne pondérée des catégories pour lesquelles le modèle a des résultats. Profil par défaut : Raisonnement, Maths, Code, Agents ×1 ; Connaissances ×0,75 ; Contexte long et Multimodal ×0,5.
4
Couverture
Un modèle qui ne publie que ses meilleurs résultats ne doit pas gagner. Les points finaux valent score × (0,75 + 0,25 × couverture) × 10, soit 1000 points au maximum.