حقق نموذج Qwen 3.8 27B، الذي يعمل بتنسيق FP8 مع نافذة سياق بحجم 256K عبر vLLM، نتيجة قدرها 72.9 في معيار Aider.

  • تتطابق النتيجة مع Gemini 2.5 Pro (72.9) وتتجاوز Claude Opus 4 (72.0) و DeepSeek R1 (71.4).
  • يلاحظ المؤلف أنه على الرغم من أن المعيار قد يكون قديماً، فإن أداء النموذج على MacBook قابل للمقارنة مع نماذج state-of-the-art من قبل أكثر من عام.
  • يُوصف الأداء الفعلي بأنه يتجاوز هذه النماذج بسبب التحسينات في إطار الاختبار.