VisionAId هو تطبيق أندرويد مصمم للعمل دون اتصال أولاً لمساعدة ذوي الإعاقة البصرية من خلال تحويل هاتف ذكي تجاري إلى مساعد مرئي في الوقت الفعلي. يدمج النظام ستة نماذج تعلم عميق على الجهاز تعمل عبر ONNX Runtime، بما في ذلك تقدير العمق أحادي العين المعياري، وتجزئة الكائنات، وكشف الوجه.
- ميزة مميزة هي خط أنابيب لعدد قليل من العينات للكائنات الشخصية يسمح للمستخدمين بتصوير العناصر من زوايا متعددة لتحديد موقعها لاحقاً عبر علامات الواقع المعزز والصوت المكاني.
- يستخدم النظام التكميم INT8 على Samsung Galaxy S21 Ultra لتقليل تأخير العمق من حوالي 1200 مللي ثانية إلى 491 مللي ثانية.
- يحقق كاشف الأوراق النقدية المخصص mAP@50 بقيمة 0.986، بينما يحافظ معايرة العمق المعياري على خطأ أقل من 1 سم ضمن مسافة 3 أمتار.
من خلال العمل بالكامل على الجهاز مع دعم سحابي اختياري للوصف السردي، يعالج VisionAId قيود تطبيقات المساعدة الحالية التي تعتمد بشكل كبير على الاتصال السحابي أو الأجهزة المخصصة.