Informes de IA · Epoch AI · 2026-11-04 · Blog / comentario
Actualización de la metodología del ECI para usar un modelo bayesiano
Título original: Updating the ECI methodology to use a Bayesian model
Epoch AI ha actualizado el modelado que sustenta el Epoch Capabilities Index (ECI), que mide y rastrea la capacidad de los modelos de IA a partir de los resultados de benchmarks. El nuevo modelo bayesiano pretende ofrecer estimaciones de incertidumbre mejor fundamentadas y calcular qué tan probable es que un modelo sea más capaz que otro. El ECI se basa en la Teoría de Respuesta al Ítem (IRT), adaptada para tratar las puntuaciones de los benchmarks como la proporción esperada de preguntas que un modelo responde correctamente.