文章重点展示了 Gemini 3.7 Flash 更新中的一张图表，显示之前的版本（特别是 3.5 和 3.6 Flash）在性能上落后于更新的 Claude 4.8+ 和 GPT 5.5+ 系列模型。
- 此次更新旨在缩小与 Claude 4.8+ 和 GPT 5.5+ 等竞争对手的性能差距。
- 公告中最具说服力的一点是引用了一张图表，说明了此前在性能上的落后情况。
media
Latent Space
·
1 小时前
·
agents
Gemini 3.7 Flash 更新让 GDM 重回前沿
译自 English → 中文
相关文章
arxiv
arXiv cs.AI
·
1 天前
·
2 次浏览
VITA 临床 RAG 在 HealthBench 上匹配或超越前沿大语言模型
专为中低收入环境设计的检索增强生成系统 VITA，在 HealthBench 基准测试中与通用大型语言模型进行了对比评估。研究表明，即使随着更新的前沿模型发布，针对语料库的特定设计仍能保持具有竞争力的性能。
arxiv
arXiv cs.CL
·
1 天前
·
1 次浏览
针对特定语料的VITA RAG在HealthBench上匹配或超越前沿LLM
VITA是一个专为低收入和中等收入环境设计的检索增强生成系统，在HealthBench的英文子集上排名第一，超越了GPT-5.4、o4-mini、Gemini 3.1 Pro和Claude Sonnet 4.6。
arxiv
arXiv cs.AI
·
39 天前
TestEvo-Bench：用于测试与代码协同进化的可执行实时基准
研究人员推出了 TestEvo-Bench，这是一个实时基准，旨在评估智能体处理软件测试和代码协同进化的能力。与依赖静态元数据的现有基准不同，该框架使用真实的提交历史和配置环境来验证可执行的指标，如通过率（pass rate）和覆盖率。
media
r/LocalLLaMA
·
39 天前
Meta 使用未成年人视角的危机提示测试了 ChatGPT、Gemini 和 Character.AI
据报道，Meta 雇佣了数百名承包商伪装成未成年人，向 OpenAI、Google 和 Character.AI 的聊天机器人发送与自杀、性和毒品相关的提示。在单次测试轮次中，发送了超过 45,000 条提示。
arxiv
arXiv cs.CL
·
39 天前
·
1 次浏览
Gemma 4 31B 的 QLoRA 微调缩小了罗马尼亚语跨语言关系抽取的差距
该研究通过翻译 SemEval-2010 Task 8 基准并评估 Gemma 4 31B 与编码器基线的对比，调查了罗马尼亚语的跨语言关系抽取。结果表明，QLoRA 微调使宏观 F1-Score 提高了超过 22 个百分点，将跨语言差距从 3.3 缩小到 1.4pp。