Benchmark · reasoning
ARC-AGI 1
يقيس ARC-AGI 1 التفكير التجريدي والتعميم: تعرض كل مهمة بضعة أمثلة على شبكات «مدخل→مخرج»، وعلى مَن يحل المهمة أن يستنتج قاعدة التحويل الخفية وينتج شبكة المخرج الصحيحة لمدخل جديد. المقياس هو النسبة المئوية للمهام التي حُلّت بشبكة مخرج مطابقة تمامًا.
اقرأ المزيد
- مثال
- قد تعرض المهمة شبكتين أو ثلاث شبكات ملوّنة صغيرة يتحوّل فيها كل مدخل إلى مخرجه وفق القاعدة نفسها — مثل ملء كل منطقة مغلقة أو عكس شكل كالمرآة — وعليك تطبيق هذه القاعدة المستنتَجة على شبكة جديدة لم تُرَ من قبل.
- طريقة التقييم
- لا تُحتسب المهمة محلولة إلا إذا طابقت الشبكة المنتَجة الإجابة المرجعية خلية بخلية؛ والنتيجة النهائية هي نسبة (النسبة المئوية) المهام المحلولة في كامل مجموعة التقييم.
- التحقق
- التحقق آلي ودقيق: تُقارَن شبكة المخرج المُرسَلة بالشبكة الصحيحة خلية بخلية، بلا درجات جزئية ولا تصويت بشري.
- لماذا يهم
- صُمّمت الألغاز لتكون سهلة على البشر وصعبة على النماذج التي تعتمد على أنماط محفوظة، لذا يختبر هذا المعيار التجريد الحقيقي والتعميم من أمثلة قليلة بدلاً من استرجاع المعرفة — ما يجعله مقياسًا يُتابَع عن كثب لقياس التقدّم نحو ذكاء اصطناعي أكثر عمومية.
مثال محلول
المهمة
يعرض ARC-AGI 1 بضعة أمثلة على شبكات مدخل→مخرج ثم مدخلاً اختبارياً محجوباً؛ عليك استنتاج التحويل ورسم شبكة المخرج بدقة (الخلايا ألوان 0-9، 0=أسود). تكشف الأمثلة عن قاعدة ذاتية التفرّع (fractal): كل شبكة 3×3 تتوسّع إلى 9×9، إذ تُطبع نسخة من الشبكة كاملة حيث تكون الخلية ملوّنة، وكتلة 3×3 فارغة حيث تساوي 0. مدخل الاختبار (3×3):
0 8 0 / 8 8 8 / 0 8 0 (علامة زائد باللون 8).الحل
0 0 0 0 8 0 0 0 0
0 0 0 8 8 8 0 0 0
0 0 0 0 8 0 0 0 0
0 8 0 0 8 0 0 8 0
8 8 8 8 8 8 8 8 8
0 8 0 0 8 0 0 8 0
0 0 0 0 8 0 0 0 0
0 0 0 8 8 8 0 0 0
0 0 0 0 8 0 0 0 0
الشرح
خلايا اللون 8 تقع في منتصفات الأضلاع الأربعة وفي مركز علامة الزائد؛ طبع علامة الزائد في هذه الكتل الخمس 3×3 بالضبط (وترك الأركان الأربعة فارغة) يبني الشكل الكسوري المتكرر 9×9. لا يمنح ARC-AGI الدرجة إلا عند التطابق التام خلية بخلية — خطأ في خلية واحدة يُفشل المهمة، مع السماح بمحاولتين على الأكثر.