Los Laboratorios de Investigación en Ingeniería Humana (HERL) de la Universidad de Pittsburgh están liderando la Plataforma Robótica de Movilidad y Manipulación Asistencial que Proporciona Independencia a Personas con Discapacidades (RAMMP), un proyecto respaldado por hasta $41.5 millones en financiación de ARPA-H. La iniciativa tiene como objetivo crear soluciones de movilidad asistencial más seguras y adaptables para usuarios de sillas de ruedas, integrando robótica avanzada con modelos de visión por IA de código abierto de Meta.
- RAMMP utiliza DINOv3 y el Modelo Segment Anything (SAM) de Meta para habilitar la percepción ambiental en tiempo real en dispositivos edge.
- Los ingenieros optimizan estos modelos para hardware alimentado por baterías reduciendo la huella de memoria y utilizando menor precisión para garantizar un funcionamiento fiable en tiempo real.
- El sistema emplea RF-DETR ajustado finamente con incrustaciones DINOv2 y datos etiquetados automáticamente de SAM para lograr detección adaptativa de objetos en 360 grados.
- Este enfoque permite a los usuarios interactuar naturalmente con su entorno, reduciendo la carga cognitiva y mejorando la seguridad mediante la detección de obstáculos como bordillos y botones de puerta.
Al ejecutar potentes modelos de IA directamente en el dispositivo, el equipo de RAMMP asegura que los robots asistenciales puedan operar de manera fiable en entornos cotidianos impredecibles sin depender de conectividad externa, aumentando así la independencia del usuario.