Um novo conjunto de dados multimodal chamado corpus In-Car Sign Language (ICSL) foi introduzido para abordar os desafios do uso da língua de sinais em serviços de mobilidade compartilhada, como táxis e plataformas de transporte por aplicativo. O recurso foca na Língua Brasileira de Sinais (Libras) para melhorar a acessibilidade do transporte público para a comunidade surda e com deficiência auditiva no interior confinado dos veículos.
- O conjunto de dados inclui dados de captura de movimento de laboratório de alta precisão para estabelecer uma base linguística e gravações multimodais do mundo real de câmeras 2D e sensores de tempo de voo (Time-of-Flight) 3D.
- Ele compreende mais de 1,5 milhão de frames de fluxos sincronizados apresentando usuários de Libras em vários cenários dentro do veículo.
- O corpus fornece anotações de gloss para sinais léxicos e elementos não léxicos para apoiar o treinamento e a avaliação de redes neurais profundas.
Este recurso permite análises comparativas entre animações de avatares sintetizados e vídeos reais de sinalização, fornecendo uma base para modelos robustos de reconhecimento de língua de sinais em ambientes restritos e com obstruções.