Rapports sur l'IA · Stanford HAI · 2026-10-30 · Rapport / livre blanc
Qu'est-ce qui fait un bon benchmark d'IA ? | Stanford HAI
Titre original: What Makes a Good AI Benchmark? | Stanford HAI
Cette note présente un nouveau cadre pour évaluer la qualité des benchmarks d'IA et y confronte 24 benchmarks. Elle constate d'importants écarts de qualité entre eux, y compris parmi les benchmarks largement utilisés par les développeurs et les décideurs politiques. La plupart des benchmarks atteignent leur meilleure qualité à l'étape de la conception et la plus faible à l'étape de la mise en œuvre.