AI رپورٹس · Epoch AI · 2026-11-04 · بلاگ / تبصرہ
ECI کے طریقہ کار کو Bayesian ماڈل استعمال کرنے کے لیے اپ ڈیٹ کرنا
اصل عنوان: Updating the ECI methodology to use a Bayesian model
Epoch AI نے Epoch Capabilities Index (ECI) کے پیچھے موجود ماڈلنگ کو اپ ڈیٹ کیا ہے، جو بینچ مارک نتائج کی مدد سے AI ماڈل کی صلاحیت کو ناپتا اور اس کا سراغ رکھتا ہے۔ نیا Bayesian ماڈل غیر یقینی صورتحال کے بہتر طور پر مدلل تخمینے فراہم کرنے اور یہ حساب لگانے کا مقصد رکھتا ہے کہ ایک ماڈل کے دوسرے ماڈل سے زیادہ قابل ہونے کا کتنا امکان ہے۔ ECI کی بنیاد Item Response Theory (IRT) پر ہے، جسے اس طرح ڈھالا گیا ہے کہ بینچ مارک اسکورز کو ان سوالات کے متوقع تناسب کے طور پر لیا جائے جن کا ماڈل درست جواب دیتا ہے۔