AI रिपोर्ट्स · Epoch AI · 2026-11-04 · ब्लॉग / टिप्पणी
ECI पद्धति को अपडेट कर बेयesian मॉडल का उपयोग करना
मूल शीर्षक: Updating the ECI methodology to use a Bayesian model
Epoch AI ने Epoch Capabilities Index (ECI) के पीछे की मॉडलिंग को अपडेट किया है, जो बेंचमार्क परिणामों का उपयोग करके AI मॉडल की क्षमता को मापता और ट्रैक करता है। नए बेयesian मॉडल का उद्देश्य अनिश्चितता के बेहतर-आधारित अनुमान देना और यह गणना करना है कि एक मॉडल के दूसरे से अधिक सक्षम होने की कितनी संभावना है। ECI आइटम रिस्पॉन्स थ्योरी (IRT) पर आधारित है, जिसे बेंचमार्क स्कोर को इस रूप में मानने के लिए अनुकूलित किया गया है कि मॉडल कितने प्रश्नों का सही उत्तर देगा, इसका अपेक्षित अनुपात क्या है।