A Google lançou um modelo experimental, Gemini-Exp-1114, que agora ocupa o 1º lugar compartilhado no ranking do Chatbot Arena ao lado do ChatGPT-4o-latest da OpenAI. Testado com mais de 6.000 votos da comunidade, o modelo alcançou uma pontuação geral de Arena de 1344, superando as versões anteriores do Gemini e vencendo o o1-preview da OpenAI.
O Gemini-Exp-1114 ocupa o 1º lugar no ranking de Visão e em duas categorias não especificadas, enquanto fica em 3º lugar em codificação e Prompts Difíceis com Controle de Estilo. Em comparações diretas, ele vence 50% dos votos contra o GPT-4o-latest, 56% contra o o1-preview e 62% contra o Claude-3.5-Sonnet.
Os desenvolvedores podem testar o modelo atualmente via Google AI Studio, com acesso à API esperado em breve.