قام مهندس بفتح مصدر نسخة طبق الأصل من مشروع سوريا ناريدي الفيروسي، الذي يدرب نموذج برمجة على رسم ألوان مائية باستخدام جافاسكريبت والتعلم المعزز. تستخدم التنفيذ مكتبة TRL وOpenEnv لإنشاء خط أنابيب متكامل على Hugging Face للتدريب والتقييم والاستنتاج.
- يستخدم النظام p5.brush لمحاكاة تأثيرات الألوان المائية مثل تسرب الصبغة وملمس الورق من خلال مجموعة مقيدة من عشر طرق.
- تُشتق المكافآت من قاضيين: HPSv3 لتفضيل جمالي وقاضي زوجي يقارن المخرجات بمجموعة مكونة من 178 صورة مولدة مُقيّمة يدوياً.
- أُجريت ثلاث عمليات تدريب بأوزان متفاوتة بين القاضيين، مما يوضح أن النموذج يمكنه تعلم تقليد أساليب فنية محددة مشفرة في مجموعة البيانات.
- تم نشر الوصفة الكاملة، بما في ذلك بيئة التعلم المعزز ونموذج التقييم والنماذج المدربة، على Hugging Face Hub.
يُظهر هذا المشروع كيف يمكن للتعلم المعزز عبر الذوق الذاتي توجيه نموذج أصغر لإنتاج أساليب فنية مميزة بدلاً من صور متوسطة إحصائياً.