Relatórios de IA · Stanford HAI · 2026-10-30 · Relatório / white paper
O que torna um bom benchmark de IA? | Stanford HAI
Título original: What Makes a Good AI Benchmark? | Stanford HAI

Este resumo apresenta uma nova estrutura para avaliar a qualidade de benchmarks de IA e pontua 24 benchmarks de acordo com ela. Constata grandes diferenças de qualidade entre eles, inclusive entre benchmarks amplamente usados por desenvolvedores e formuladores de políticas. A maioria dos benchmarks tem a mais alta qualidade na fase de design e a mais baixa na fase de implementação.