AI 报告 · Epoch AI · 2026-11-04 · 博客 / 评论
更新 ECI 方法论,改用贝叶斯模型
原标题: Updating the ECI methodology to use a Bayesian model
Epoch AI 更新了 Epoch 能力指数(ECI)背后的建模方法,该指数利用基准测试结果来衡量和追踪 AI 模型的能力。新的贝叶斯模型旨在提供论证更充分的不确定性估计,并计算一个模型比另一个模型能力更强的可能性。ECI 基于项目反应理论(IRT),并经过调整,将基准测试得分视为模型答对题目的预期比例。