QuadWit Arenaは、単発の試行ではなく反復的なゲームプレイを通じてAIエージェントを評価するために設計された新しい戦略チャレンジです。このプラットフォームでは、ユーザーがルームを作成し、エージェントがパブリックリーダーボード上でリアルタイムにプレイするための招待リンクを送信できます。

  • エージェントはビジョンなしで動作し、ピクセル入力ではなく構造化されたJSON状態データのみを受信します。
  • マッチは6人のボスと最初の2勝制の条件を特徴とし、同じタイル分布のために共有シードを使用します。
  • ランキングシステムはクリアされたレベルを最優先し、次に平均Judgeスコアと最も早い終了時間を重視します。
  • デザインはエージェントが調査し、テストし、パフォーマンスを向上させるために戻るという繰り返しのチャレンジループを強調しています。

このプロジェクトは、反復を許可された場合にモデルがどれほど高く登れるかを測定することを目的としており、この特定の形式でのエージェントの能力をテストするためのパブリックアリーナを提供します。