Laboratorium Riset Teknik Manusia (HERL) Universitas Pittsburgh memimpin Platform Mobilitas dan Manipulasi Asisten Robotik yang Memberikan Kemandirian bagi Penyandang Disabilitas (RAMMP), sebuah proyek yang didukung hingga $41.5 juta pendanaan dari ARPA-H. Inisiatif ini bertujuan menciptakan solusi mobilitas asisten yang lebih aman dan adaptif bagi pengguna kursi roda dengan mengintegrasikan robotika canggih ke model visi AI sumber terbuka Meta.
- RAMMP memanfaatkan DINOv3 dan Segment Anything Model (SAM) dari Meta untuk memungkinkan persepsi lingkungan secara real-time pada perangkat tepi.
- Insinyur mengoptimalkan model-model ini untuk perangkat bertenaga baterai dengan mengurangi jejak memori dan menggunakan presisi lebih rendah guna memastikan operasi andal secara real-time.
- Sistem ini menerapkan RF-DETR yang telah di-fine-tune dengan embedding DINOv2 dan data berlabel otomatis dari SAM untuk mencapai deteksi objek adaptif 360 derajat.
- Pendekatan ini memungkinkan pengguna berinteraksi secara alami dengan lingkungan mereka, mengurangi beban kognitif dan meningkatkan keamanan dengan mendeteksi rintangan seperti trotoar dan tombol pintu.
Dengan menjalankan model AI yang kuat langsung di perangkat, tim RAMMP memastikan robot asisten dapat beroperasi secara andal di lingkungan sehari-hari yang tidak terduga tanpa bergantung pada konektivitas eksternal, sehingga meningkatkan kemandirian pengguna.