研究者らは、低遅延の対話をリアルタイムのオーディオビジュアル知覚と統合する Gemini ベースのマルチエージェントシステムである AMIE (Video) を使用して、リアルタイムの臨床ビデオ相談のための初のエキスパートレベル AI システムを実証しました。30人のプライマリケア医師と100のシナリオを対象とした無作為化構造化臨床試験(OSCE)研究では、臨床評価者は、病歴聴取、診断、管理、身体観察において、システムを医師と同程度またはそれ以上と評価しました。

  • AMIE (Video) は、患者のコミュニケーション効果性と理解された感覚に対する嗜好において、テキストのみの対抗物を上回りました。
  • 信頼関係とパートナーシップの構築については、患者は依然としてプライマリケア医師を好んでいました。
  • システムは、微細な解剖学的精度、微妙な感情的ニュアンス、および高頻度運動において制限を示しました。

これらの結果は、臨床実践の感覚的複雑さ全体にわたってケアを補完できる AI システムへのマイルストーンを示していますが、現実世界への移行にはさらなる研究が必要です。