10:47
官方账号arXiv cs.AI@Hao Yin, Paritosh Parmar, Lijun Gu, Lin Xu, Tianxiao Guo, Xiujin Liu, Tianyou Zheng, Yang Zhang, Weiwei Fu
推荐理由：MyoMechanix通过多模态感知和结构化表示，在技能活动理解和指导方面取得了突破，为健身、康复、医疗和机器学习领域的物理AI应用提供了新的解决方案。
MyoMechanix
共 1 条相关 AI 资讯
8月27日
10:47
MyoMechanix是一个多模态生态系统，用于重量负荷动作，将运动与肌肉活动对齐。包含7500多个样本，包括多视图RGB视频、3D姿态、sEMG和生理信号。构建了健身知识图谱（FKG），用于组织动作、阶段、关键步骤、错误和纠正反馈的结构化关系。开发CUBIST，用于细粒度错误归因和反馈生成。实验表明，多模态感知和结构化表示提高了性能、可解释性和错误归因，CUBIST达到最先进的结果；VideoQA增强了基于语言的动作理解；Video2EMG提出了基于视频的EMG传感替代方案。