एक रेडिट उपयोगकर्ता ने ओपन-सोर्स बड़े भाषा मॉडलों के लिए वर्तमान दक्षता सीमा की एक विज़ुअलाइज़ेशन प्रकाशित की है। चार्ट में दक्षता को बेंचमार्क स्कोर को सक्रिय पैरामीटर की संख्या से विभाजित करने के रूप में परिभाषित किया गया है।

  • विश्लेषण उन सभी मॉडलों को फ़िल्टर करता है जो पारेतो सीमा पर नहीं हैं।
  • डेटा artificialanalysis.ai से एग्रीगेट किया गया है, जो ज्ञात कमियों के बावजूद एक सामान्य संकेतक के रूप में कार्य करता है।
  • लक्ष्य उपलब्ध सबसे पैरामीटर-दक्ष ओपन मॉडलों की पहचान करना है।