نشرت Databricks معيارًا لوكلاء البرمجة على قاعدة الكود الخاصة بها التي تحتوي على ملايين الأسطر، وأبلغت أن وكيلها الداخلي pi-coding-agent أرخص بنسبة تصل إلى 2x من Claude Code أو Codex مع تحقيق معدلات نجاح أعلى. وجدت الدراسة أيضًا أن GLM 5.2 يؤدي أداءً يعادل Opus 4.8 high ويتفوق على GPT 5.5 high وxhigh.

  • يستخدم pi-coding-agent نهج bash-for-everything بأدوات الحد الأدنى، مما يؤدي إلى تكاليف أقل ومعدلات نجاح أفضل بشكل عام مقارنة بـ Claude Code وCodex.
  • تم تصنيف GLM 5.2 فوق GPT 5.5 high وxhigh، ويُعتبر معادلًا لـ Opus 4.8 high لمعظم مهام البرمجة.
  • يلاحظ المؤلف أن الـ prefix الخاص بـ Claude Code يتضمن أدوات مدمجة مثل Playwright والتي قد تفيد المهام البصرية، بينما يفتقر GLM إلى دعم الإدخال الأصلي للصور.

يوفر المعيار تقييماً مستقلاً من Databricks، وهو مختبر ذو خبرة كبيرة في تدريب LLM، مما يقدم رؤى حول مقايضات التكلفة والأداء لوكلاء البرمجة المختلفة.