Sebuah dataset multimodal baru yang disebut korpus In-Car Sign Language (ICSL) telah diperkenalkan untuk mengatasi tantangan penggunaan bahasa isyarat dalam layanan mobilitas bersama seperti taksi dan platform berbagi tumpangan. Sumber daya ini berfokus pada Bahasa Isyarat Brasil (Libras) untuk meningkatkan aksesibilitas transportasi umum bagi komunitas Tuli dan Tuna Runggu di interior kendaraan yang terbatas.
- Dataset ini mencakup data penangkapan gerakan laboratorium presisi tinggi untuk menetapkan dasar linguistik dan rekaman multimodal dunia nyata dari kamera 2D dan sensor Time-of-Flight 3D.
- Dataset ini terdiri dari lebih dari 1,5 juta frame aliran tersinkronisasi yang menampilkan pengguna Libras di berbagai skenario dalam mobil.
- Korpus ini menyediakan anotasi gloss untuk tanda leksikal dan elemen non-leksikal untuk mendukung pelatihan dan evaluasi jaringan saraf dalam.
Sumber daya ini memungkinkan analisis komparatif antara animasi avatar sintetis dan video bahasa isyarat nyata, memberikan dasar untuk model pengenalan bahasa isyarat yang kuat di lingkungan yang terbatas dan terhalang.