Poetiq는 ARC-AGI-2 Semi-Private Test Set에서 새로운 state-of-the-art를 수립하며 54%의 성공률을 달성했습니다. 이 결과는 ARC Prize Team에 의해 검증되었으며, 이 벤치마크에서 시스템이 50% 장벽을 돌파한 것은 처음입니다.
- Poetiq의 오픈소스 ARC-AGI 솔버는 문제당 30.57달러의 비용으로 54%의 정확도를 달성했습니다.
- 이전 최고 점수는 Gemini 3 Deep Think가 기록한 45%였으며, 문제당 77.16달러가 소요되었습니다.
- 시스템은 모델 파인튜닝 없이도 Gemini 3과 같은 기존 프론티어 모델을 활용하여 솔루션을 최적화하기 위해 Poetiq의 메타 시스템을 사용합니다.
- 메타 시스템은 해결된 태스크에서 학습하여 성능을 향상시키며, 더 큰 시스템 내의 AI 구성 요소를 최적화할 수 있습니다.
이 성과는 비용 효율적인 추론을 위한 새로운 Pareto frontier를 보여주며, 새로운 모델을 구축하거나 훈련하는 대신 기존 모델의 능력을 활용하여 복잡한 문제를 효율적으로 해결할 수 있음을 보여줍니다.