Se ha presentado un nuevo conjunto de datos multimodal llamado corpus In-Car Sign Language (ICSL) para abordar los desafíos del uso de la lengua de señas en servicios de movilidad compartida como taxis y plataformas de transporte por aplicación. El recurso se centra en la Lengua de Señas Brasileña (Libras) para mejorar la accesibilidad del transporte público para la comunidad sorda y con discapacidad auditiva en el interior confinado de los vehículos.
- El conjunto de datos incluye datos de captura de movimiento de laboratorio de alta precisión para establecer una base lingüística y grabaciones multimodales del mundo real tomadas con cámaras 2D y sensores de tiempo de vuelo (Time-of-Flight) 3D.
- Comprende más de 1,5 millones de fotogramas de flujos sincronizados que presentan usuarios de Libras en diversos escenarios dentro del vehículo.
- El corpus proporciona anotaciones de glosa para signos léxicos y elementos no léxicos para apoyar el entrenamiento y la evaluación de redes neuronales profundas.
Este recurso permite análisis comparativos entre animaciones de avatares sintetizados y videos reales de señas, proporcionando una base para modelos robustos de reconocimiento de lengua de señas en entornos restringidos y con oclusiones.