تم تقييم نظام مُصمم خصيصًا لتوليد النصوص المعزز بالاسترجاع يُدعى VITA، والمُعدّ للبيئات ذات الدخل المنخفض والمتوسط، مقابل نماذج لغوية كبيرة لأغراض عامة على معيار HealthBench. تُظهر الدراسة أن التصميم المخصص للمجموعة النصية يمكنه الحفاظ على أداء تنافسي حتى مع إصدار نماذج متقدمة جديدة.
- في 4,023 سؤالًا باللغة الإنجليزية من HealthBench، احتل VITA المرتبة الأولى بنسبة 51.9% من نقاط التقييم الممكنة، متقدمًا على GPT-5.4 (46.1%)، وo4-mini (44.3%)، وGemini 3.1 Pro (42.6%)، وClaude Sonnet 4.6 (37.3%).
- حصل VITA على أعلى الدرجات في 45.4% من الأسئلة عند التقييم بواسطة حكم GPT-4.1.
- في اختبار للمتانة باستخدام حكم مفتوح الوزن ومحايد، حقق VITA تعادلًا مع GPT-5.5 وتقدم في النقاط المرجحة.
- يسترجع النظام من مجموعة نصية مُرشّحة تشمل إرشادات خاصة بالأمراض، وبيانات مقاومة مضادات الميكروبات الخاصة بالهند، وبروتوكولات الرعاية محدودة الموارد.
تشير النتائج إلى أن نظام RAG سريري مُصمم خصيصًا لا يزال تنافسيًا أمام نماذج اللغات الكبيرة المتقدمة، مما يشير إلى أن خصوصية المجموعة النصية تحسّن التأسيس رغم احتمالية انخفاض جودة الصياغة التواصلية.