أعاد التحقق المستقل لنموذج الاستدلال الهرمي (HRM) على مجموعة بيانات ARC-AGI شبه الخاصة تكرار النتائج بـ 32% على ARC-AGI-1 و2% على ARC-AGI-2، مما يؤكد نتائج مبهرة لحجم 27 مليون معلمة. كشفت دراسات الإزالة أن البنية الهرمية للنموذج كان لها تأثير ضئيل مقارنة بمحول بحجم مماثل، بينما قاد عملية تحسين الحلقة الخارجية مكاسب أداء كبيرة.
- حقق HRM نسبة 32% على ARC-AGI-1 و2% على مجموعات ARC-AGI-2 شبه الخاصة.
- ساهم الحساب الهرمي H-L بأقل قدر ممكن في الأداء مقارنة بمحول أساسي.
- تم تحديد عملية تحسين الحلقة الخارجية كمحرك رئيسي للنجاح، خاصة أثناء التدريب.
- أظهر التعلم بالنقل عبر المهام فوائد محدودة، مع تعزى معظم الأداء إلى حفظ مهام التقييم المحددة.
- كان تعزيز مهمة ما قبل التدريب أمرًا حاسمًا، مما يتطلب فقط 300 تعزيز بدلاً من 1,000 المبلغ عنها في الورقة الأصلية.
تشير هذه النتائج إلى أن نهج HRM مشابه جوهريًا لـ "ARC-AGI بدون تدريب مسبق"، متحديًا السرد القائل بأن بنيته الهرمية المستوحاة من الدماغ هي العامل المميز الرئيسي.