تم اقتراح شبكة انتباه الرسم البياني متعدد المشاهد ذات البوابة للكشف عن مرض الزهايمر من خلال تحليل الكلام التلقائي باستخدام إطار عمل "المحتوى-الهيكل-التدفق". يقوم النظام بتحويل الصوت إلى نص عبر التعرف التلقائي على الكلام (ASR) لبناء رسوم بيانية دلالية، واعتمادية، وتزامن، مستخدماً المعلومات المتبادلة النقطية (PMI) من مجموعة بيانات معيارية لتكميم المنطق السردي.

  • يدمج النموذج هذه المشاهد البيانية المميزة باستخدام آلية اندماج بوابة تكيفية لمعالجة التباين السريري.
  • تم تقييم النهج على مجموعة بيانات ADReSSo، وحقّق دقة 90.00%.
  • تؤكد دراسات الإزالة أن كل من الرسم البياني القائم على PMI وآلية البوابة ضروريان لتصنيف قوي.

يعتقد المؤلفون أن هذا مهم لأنه يعالج الاضطرابات الهيكلية غير الخطية في اللغة المرضية التي تتجاهلها العديد من الأنظمة الحالية. الكود المصدري متاح علناً.