Claude 3.7 Sonnet telah mengambil tempat pertama di benchmark Aider Polyglot milik Paul Gauthier, sebuah evaluasi independen yang berfokus pada kemampuan kode.

  • Model ini meraih tempat pertama saat dijalankan dengan batas token berpikir yang ditingkatkan menjadi 32.000.
  • Biaya untuk menjalankan seluruh benchmark adalah $36,83, yang secara signifikan lebih tinggi daripada pemimpin sebelumnya tetapi lebih rendah dari peringkat ketiga o1-high.
  • Belum ada hasil yang tersedia untuk Claude 3.7 Sonnet di papan peringkat LM Arena.