किन कंपनियों के मॉडल सबसे आगे हैं?

कोई कंपनी तब आगे होती है जब वह आपके बजट में सबसे बुद्धिमान मॉडल देती है। उसकी हिस्सेदारी बजट की उस सीमा का भाग है जिसे वह कवर करती है, बाज़ार हिस्सेदारी नहीं।

• रोज़ की हिस्सेदारी का कुल 100% होता है। बजट उस दिन के सबसे सस्ते मॉडल से शुरू होकर एक साझा ऊपरी सीमा तक जाता है। पैमाना लॉगरिदमिक (log scale) है: बजट में हर दस गुना बढ़ोतरी की चौड़ाई समान है। लागत एक बार बेंचमार्क चलाने की है, प्रति टोकन (token) की नहीं।
• लंबी अवधि के लिए औसत लिया जाता है। बार दिन, हफ़्ते या महीने दिखाते हैं। रैंकिंग चुनी अवधि की रोज़ की हिस्सेदारी का औसत लेती है। अनुपस्थित कंपनियों को शून्य गिना जाता है; जिन दिनों कोई बेहतरीन विकल्प उपलब्ध नहीं था, उन्हें छोड़ दिया जाता है।
• बराबरी पर हिस्सेदारी बाँटी जाती है। स्कोर और लागत समान होने पर कंपनियों में हिस्सा बराबर बाँटा जाता है। एक ही मॉडल की प्रतियाँ और रीजनिंग प्रयास के अलग स्तर अतिरिक्त हिस्सा नहीं जोड़ते। स्कोर समान हो तो सस्ता मॉडल आगे रहता है।
• तारीखें मॉडल की रिलीज़ के अनुसार हैं। सिर्फ़ रिलीज़ तारीख, स्कोर और लागत वाले मॉडल शामिल हैं। डाउनलोड किए जा सकने वाले वेट्स (open weights) के मॉडल अलग समूह में तुलना किए जाते हैं। नए डेटा से रीप्ले और बजट की ऊपरी सीमा बदल सकती है।
• तालिका का विवरण। प्रयास के अलग स्तरों को एक मॉडल में जोड़ा जाता है। रैंक में बदलाव की तुलना बेहतरीन विकल्पों में पिछले बदलाव से होती है; “नया” का मतलब कंपनी का प्रवेश या वापसी है। अवधि चुनी हुई सीमा तक रखी जाती है और प्रतिशत राउंड किए जाते हैं।

किन रिलीज़ से बेहतरीन विकल्प बेहतर हुए? →

डेटा देखें