louidev lançou o conjunto de dados GlassBallAI no Hugging Face, capturando o comportamento de previsão em tempo real dos modelos Gemini do Google antes que os resultados sejam conhecidos. O conjunto de dados contém mais de 3.655 linhas de dados coletadas entre 17 de fevereiro e 19 de maio de 2026, abrangendo Gemini 2.5 Flash, 2.5 Pro, 2.5 Flash Lite e 3.0 Flash Preview.
- Cada entrada inclui uma antecipação de 10 dias úteis para direção de preço, sentimento, confiança e rastros completos de raciocínio.
- Os dados são bloqueados no tempo para evitar ajuste retrospectivo das respostas, com Erro de Calibração Esperada Global (ECE) medido em 0,217.
- As descobertas iniciais indicam uma inversão de confiança/precisão, onde a precisão cai para aproximadamente 28% na faixa de maior confiança (0,8–0,9).
- Um painel complementar e um documento detalhando a metodologia estão disponíveis.
O conjunto de dados destina-se a facilitar pesquisas sobre calibração e alucinação em LLMs, fornecendo dados de previsão fundamentados e em tempo real, em vez de registros históricos já resolvidos.