एक उपयोगकर्ता ने AI सहायकों के लिए एक दीर्घकालिक मेमोरी पाइपलाइन विकसित की और ओपन-सोर्स किया, जो अपने स्टोरेज और रीट्रीवल कंपोनेंट्स को Qwen3 235B A22B Instruct 2507 मॉडल पर चलाता है। सिस्टम ने LongMemEval-S बेंचमार्क पर 500 में से 470 स्कोर हासिल किया, ज्ञात सिस्टम में पहले स्थान पर रहा, जबकि रिपोर्ट के अनुसार यह प्रतिस्पर्धियों की तुलना में लगभग दस गुना अधिक टोकन कुशल है।
- पाइपलाइन मेमोरी ऑपरेशन के लिए Qwen3 235B A22B Instruct 2507 का उपयोग करती है, जिससे उपयोगकर्ता अंतिम उत्तर जनरेशन के लिए एक अलग मॉडल चुन सकते हैं।
- डेवलपर ने छोटे मॉडल्स के साथ विश्वसनीयता सुनिश्चित करने के लिए प्रॉम्प्ट को परिष्कृत करने और सुरक्षा उपाय लागू करने में अपने समय का लगभग 90% बिताया।
- परियोजना में एक विस्तृत लेख, एक इंटरैक्टिव बेंचमार्क व्यूअर, और आधिकारिक ग्रेडिंग स्क्रिप्ट्स के खिलाफ स्कोर की पुष्टि करने के लिए एक ओपन-सोर्स रिपॉजिटरी (c137-runner) शामिल है।
लेखक परिणामों को पुन: उत्पन्न करने के लिए अन्य लोगों को कोड और बेंचमार्क प्रदान करता है और उन लोगों के लिए सहायता की पेशकश करता है जो सिस्टम का परीक्षण या एकीकरण में रुचि रखते हैं।