Les chercheurs ont démontré le premier système d'IA de niveau expert pour les consultations vidéo cliniques en temps réel utilisant AMIE (Video), un système multi-agents basé sur Gemini qui intègre un dialogue à faible latence avec une perception audiovisuelle en temps réel. Dans une étude randomisée d'examen clinique structuré objectif impliquant 30 médecins de premier recours et 100 scénarios, les évaluateurs cliniques ont jugé le système égal ou supérieur aux médecins pour la prise d'antécédents, le diagnostic, la prise en charge et l'observation physique.
- AMIE (Video) a surpassé sa contrepartie uniquement textuelle dans la préférence des patients pour l'efficacité communicative et le sentiment d'être compris.
- Les médecins de premier recours restaient préférés par les patients pour établir le rapport et le partenariat.
- Le système a montré des limitations dans la précision anatomique fine, les nuances affectives subtiles et les mouvements à haute fréquence.
Ces résultats marquent une étape vers des systèmes d'IA capables d'augmenter les soins à travers la complexité sensorielle de la pratique clinique, bien que des recherches supplémentaires soient nécessaires avant la traduction dans le monde réel.