Para peneliti mengusulkan BioModule, sebuah transformer temporal plug-in ringan yang melekat pada estimator pose 3D apa pun untuk memprediksi atribut biomekanik dari kerangka standar 17-sendi. Tim membangun dataset sejajar skala besar yang memasangkan video Human3.6M dan keypoints dengan ruang label biomekanik Human3.6Mplus untuk memungkinkan supervisi cross-modal yang akurat per frame.
- BioModule bersifat agnostik terhadap estimator dan tidak memerlukan modifikasi pada model pose hulu.
- Ini memprediksi kuantitas biomekanik yang menggambarkan bagaimana tubuh bergerak, memuat, dan mengaktifkan.
- Sistem ini diuji secara acuan melintasi tujuh estimator pose 3D terkini.
- Ini memberikan analisis sistematis pertama tentang bagaimana kualitas estimasi pose hulu merambat ke kesetiaan prediksi biomekanik hilir.
BioModule berfungsi sebagai jembatan yang ringkas dan modular antara estimasi pose berbasis visi dan analisis gerakan yang dapat diinterpretasikan secara fisik untuk aplikasi dalam rehabilitasi dan ilmu olahraga.