Googleの実験的Gemini 1.5 Proモデルは、生成AIベンチマークにおいてOpenAIのGPT-4oを上回り、特にLMSYS Chatbot Arenaリーダーボードでその結果を示した。

  • Gemini 1.5 Pro 0801として指定された実験版は、1,300のスコアを達成した。
  • この結果は、GPT-4oの1,286およびClaude-3の1,271を上回る。
  • Gemini 1.5 Proの以前の反復版は1,261のスコアだった。

この進展は、テック giant 間のAI優位性をめぐる継続的な競争における重要なマイルストーンを示している。