تقود مختبرات أبحاث الهندسة البشرية في جامعة بيتسبورغ (HERL) مشروع منصة التنقل والمناورة المساعدة الروبوتية التي توفر الاستقلالية للأشخاص ذوي الإعاقة (RAMMP)، وهو مشروع مدعوم بتمويل يصل إلى 41.5 مليون دولار من ARPA-H. تهدف المبادرة إلى إنشاء حلول تنقل مساعدة أكثر أمانًا ومرونة لمستخدمي الكراسي المتحركة من خلال دمج الروبوتات المتقدمة مع نماذج الرؤية بالذكاء الاصطناعي مفتوحة المصدر من Meta.

  • يستخدم RAMMP نموذج DINOv3 الخاص بـ Meta ونموذج Segment Anything Model (SAM) لتمكين الإدراك البيئي في الوقت الفعلي على الأجهزة الطرفية.
  • يقوم المهندسون بتحسين هذه النماذج للأجهزة التي تعمل بالبطاريات من خلال تقليل حجم الذاكرة المستخدمة واستخدام دقة أقل لضمان تشغيل موثوق وفي الوقت الفعلي.
  • يعتمد النظام على نموذج RF-DETR المُعدّل بدقة باستخدام تضمينات DINOv2 والبيانات ذات التسمية التلقائية من SAM لتحقيق كشف كائنات متكيف بزاوية 360 درجة.
  • يتيح هذا النهج للمستخدمين التفاعل بشكل طبيعي مع محيطهم، مما يقلل من الحمل المعرفي ويحسن السلامة من خلال اكتشاف العوائق مثل حواف الأرصفة وأزرار الأبواب.

من خلال تشغيل نماذج ذكاء اصطناعي قوية مباشرة على الجهاز، يضمن فريق RAMMP أن الروبوتات المساعدة يمكنها العمل بموثوقية في بيئات يومية غير متوقعة دون الاعتماد على الاتصال الخارجي، مما يزيد من استقلالية المستخدم.