研究人员提出了 BioModule,一种轻量级插件式时序 Transformer,可附加到任何 3D 姿态估计器上,以从标准的 17 关节骨架中预测生物力学属性。团队构建了一个大规模对齐数据集,将 Human3.6M 视频和关键点与 Human3.6Mplus 的生物力学标签空间配对,以实现逐帧准确的跨模态监督。
- BioModule 与估计器无关,无需修改上游姿态模型。
- 它预测描述身体如何运动、加载和激活的生物力学量。
- 该系统在七种最先进的 3D 姿态估计器上进行了基准测试。
- 这提供了对上游姿态估计质量如何传播到下游生物力学预测保真度的首次系统分析。
BioModule 作为基于视觉的姿态估计与可物理解释的运动分析之间的紧凑模块化桥梁,应用于康复和体育科学。