एक रेडिट उपयोगकर्ता स्थानीय बड़े भाषा मॉडलों में सुधार करने के लिए सहसंबद्ध फेबल डेटा का उपयोग करके Qwen 3.6 35B मॉडल को फाइन-ट्यून कर रहा है। परियोजना का उद्देश्य मॉडल प्रदर्शन को बढ़ाने के लिए समुदाय से व्यापक फेबल डेटासेट एकत्र करना है।
- लेखक ने फाइन-ट्यूनिंग प्रक्रिया संचालित करने के लिए H200 GPUs किराए पर लिये।
- शुरुआती बेंचमार्क्स में मानवीय मूल्यांकन और SWE स्कोर में +5% की सुधार दिखाई देता है।
- उपयोगकर्ता डेटासेट में शामिल करने के लिए अन्य लोगों से उनके स्थानीय फेबल डेटा को पैकेज करने का अनुरोध कर रहा है।
- अतिरिक्त प्रशिक्षण रनों के बाद अंतिम मॉडल को ओपन-सोर्स करने का लक्ष्य है।
यह पहल विशेष डेटा संग्रह के माध्यम से ओपन-वेट मॉडलों की क्षमताओं को बढ़ाने के लिए समुदाय-चालित प्रयासों को उजागर करती है।