يقدم الباحثون مساعد محادثة جامعي متعدد الوسائط مصممًا لمساعدة أصحاب المصلحة في الوصول إلى المعلومات في الوقت المناسب باستخدام التوليد المعزز بالاسترجاع (RAG). يجمع النظام بين نموذج لغوي كبير واسترجاع دلالي لتوليد استجابات سياقية من موارد مؤسسية مثل دليل الجامعة.
- يقبل استعلامات نصية وصورًا عبر نموذج رؤية ولغة.
- يطبق الاستدلال المُكمَّم للنشر السريع على الأجهزة ذات الموارد المحدودة.
- يستخدم خادمًا خلفيًا قابلًا للتوسع مبنيًا بـ FastAPI وواجهة أمامية متجاوبة تم تطويرها بـ Next.js.
- يقلل من الهلوسة من 31.7% إلى 6.6% مقارنة بالأنظمة الحالية.
يؤكد التقييم الكمي فعالية التأسيس بالاسترجاع، بينما أظهرت الاختبارات متعددة الوسائط درجات رضا قوية عبر كلا نوعي الاستعلام على الرغم من زيادة أوقات الاستجابة للإدخالات البصرية.