来源 · arXiv cs.AI
arxiv arXiv cs.AI · 4 天前

AMIE (Video) 在实时医疗咨询中达到专家级表现

研究人员展示了首个基于 AMIE (Video)(一种基于 Gemini 的多智能体系统)的实时临床视频会诊专家级 AI 系统,该系统将低延迟对话与实时视听感知相结合。在一项涉及 30 名初级保健医生和 100 个场景的随机客观结构化临床检查(OSCE)研究中,临床评估者认为该系统在病史采集、诊断、管理和体格检查方面与医生相当或优于医生。

arxiv arXiv cs.AI · 18 天前 · 1 次浏览

ClinFusion 推出以视觉为核心的多模态大语言模型,实现全面医学理解

研究人员推出了 ClinFusion,这是一种以视觉为核心的多模态大语言模型,旨在通过统一 2D 和 3D 医学图像理解来解决将 AI 部署到临床实践中的挑战。该系统采用组合式级联视觉编码器,包含 Cascade Spatial-Aware Locality Fusion 算子,并引入了一个由 MedIF-Bench 和基于感兴趣区域(region-of-interest)的指标组成的新评估框架。