media Latent Space · há 1 h · agents

Atualização do Gemini 3.7 Flash traz o GDM de volta à tona

Traduzido do English → Português (BR)

O artigo destaca um gráfico da atualização do Gemini 3.7 Flash mostrando que as versões anteriores, especificamente 3.5 e 3.6 Flash, ficaram para trás em relação aos modelos mais recentes das séries Claude 4.8+ e GPT 5.5+.

A atualização visa corrigir lacunas de desempenho contra concorrentes como Claude 4.8+ e GPT 5.5+.
Um gráfico é citado como o aspecto mais convincente do anúncio, ilustrando o atraso anterior no desempenho.

Importância 2/3 Latent Space Google DeepMind Benchmark results

Ler original

RAG clínico VITA iguala ou supera LLMs de ponta no HealthBench

Um sistema de geração aumentada por recuperação projetado especificamente chamado VITA, destinado a contextos de baixa e média renda, foi avaliado em comparação com modelos de linguagem grandes de propósito geral no benchmark HealthBench. O estudo demonstra que o design específico do corpus pode manter um desempenho competitivo mesmo à medida que novos modelos de ponta são lançados.

arxiv arXiv cs.CL · há 1 d · 1 visualização

VITA RAG específico do corpus iguala ou supera LLMs de ponta no HealthBench

O VITA, um sistema de geração aumentada por recuperação projetado para contextos de baixa e média renda, ocupa o primeiro lugar no subconjunto em inglês do HealthBench, superando GPT-5.4, o4-mini, Gemini 3.1 Pro e Claude Sonnet 4.6.

arxiv arXiv cs.AI · há 39 d

TestEvo-Bench: benchmark ao vivo executável para coevolução de testes e código

Pesquisadores apresentam o TestEvo-Bench, um benchmark ao vivo projetado para avaliar quão bem os agentes lidam com a coevolução de testes de software e código. Diferente de benchmarks existentes que dependem de metadados estáticos, esta estrutura utiliza históricos reais de commits e configurações de ambiente para verificar métricas executáveis como taxa de aprovação (pass rate) e cobertura.

media r/LocalLLaMA · há 39 d

Meta testou ChatGPT, Gemini e Character.AI com prompts de crise sob a perspectiva de menores

Segundo relatos, a Meta contou com centenas de contratados que se passaram por menores e enviaram prompts relacionados a suicídio, sexo e drogas para os chatbots da OpenAI, Google e Character.AI. Em uma única rodada de testes, mais de 45.000 prompts foram enviados.

arxiv arXiv cs.CL · há 39 d · 1 visualização

O ajuste fino QLoRA do Gemma 4 31B fecha a lacuna de extração de relações interlinguísticas para o romeno

O estudo investiga a extração de relações interlinguísticas para o romeno traduzindo o benchmark SemEval-2010 Task 8 e avaliando o Gemma 4 31B em comparação com linhas de base de codificadores. Os resultados mostram que o ajuste fino QLoRA melhora a F1-Score macro em mais de 22 pontos percentuais, reduzindo a lacuna interlinguística de 3,3 para 1,4pp.