ARC Prize संगठन ने 2024 की प्रतियोगिता के विजेताओं की घोषणा की और संबंधित तकनीकी रिपोर्ट प्रकाशित की, जिसमें पता चला कि ईवेंट के दौरान ARC-AGI-1 बेंचमार्क पर शीर्ष स्कोर 33% से बढ़कर 55.5% हो गया।

  • प्रतियोगिता के लिए कुल 1,430 टीमों ने 17,789 एंट्री भेजीं।
  • ग्रैंड प्राइज अclaimed रहा क्योंकि किसी भी टीम ने निजी मूल्यांकन सेट को हल नहीं किया।
  • बड़े फ्रंटियर LLMs और काफी अधिक कंप्यूट तक पहुंच के बावजूद, सेकेंडरी ARC-AGI-Pub लीडरबोर्ड पर प्रगति Kaggle स्कोर के करीब रही।
  • सभी जीतने वाले समाधान और पेपर ओपन सोर्स और पुनरुत्पादन योग्य हैं।

प्रतियोगिता को AI शोध में शुद्ध डीप लर्निंग स्केलिंग से परे नई विचारों की ओर एक बदलाव को प्रेरित करने के लिए जिम्मेदार ठहराया जाता है, जिसका प्रमाण DeepMind और OpenAI द्वारा हाल ही में जारी किए गए ऐसे रिलीज हैं जो प्रोग्राम संश्लेषण या खोज को शामिल करते हैं।