VisionAId adalah aplikasi Android offline-first yang dirancang untuk membantu penyandang tunanetra dengan mengubah smartphone komersial menjadi asisten visual real-time. Sistem ini mengintegrasikan enam model deep learning on-device yang berjalan melalui ONNX Runtime, termasuk estimasi kedalaman monokuler metrik, segmentasi instance, dan deteksi wajah.
- Fitur khasnya adalah pipeline few-shot untuk objek pribadi yang memungkinkan pengguna memotret item dari berbagai sudut untuk lokasi selanjutnya melalui penanda augmented reality dan audio spasial.
- Sistem menggunakan kuantisasi INT8 pada Samsung Galaxy S21 Ultra untuk mengurangi latensi kedalaman dari sekitar 1200 ms menjadi 491 ms.
- Detektor uang kertas khusus mencapai mAP@50 sebesar 0.986, sementara kalibrasi kedalaman metrik mempertahankan kesalahan di bawah 1 cm dalam jarak 3 meter.
Dengan beroperasi sepenuhnya on-device dengan dukungan cloud opsional untuk deskripsi naratif, VisionAId mengatasi keterbatasan aplikasi bantu yang ada yang sangat bergantung pada konektivitas cloud atau perangkat keras khusus.