今日动态
  • 生物通首页
  • 今日动态
  • 新技术专栏
  • 人才市场

生物通首页 > 今日动态 > 正文

为使用单目视频进行运动学评估铺平道路:一项临床前基准研究,对比了基于深度学习的3D人体姿态估计器与惯性传感器在日常生活活动中的表现

时间:2026年5月16日
来源:ARTIFICIAL INTELLIGENCE REVIEW

编辑推荐:

摘要机器学习和可穿戴传感器的进步为在专业实验室之外捕捉和分析人类运动提供了新的机会。在真实世界条件下准确评估人类运动对于远程医疗、运动科学和康复领域至关重要。这项临床前基准研究将基于单目视频的3D人体姿态估计模型与惯性测量单元(IMUs)进行了比较,使用了包含13种具有临床相关性

广告
   X   

摘要

机器学习和可穿戴传感器的进步为在专业实验室之外捕捉和分析人类运动提供了新的机会。在真实世界条件下准确评估人类运动对于远程医疗、运动科学和康复领域至关重要。这项临床前基准研究将基于单目视频的3D人体姿态估计模型与惯性测量单元(IMUs)进行了比较,使用了包含13种具有临床相关性的日常活动的VIDIMU数据集,这些活动是通过普通视频摄像头和五个IMUs共同记录的。在本初步研究中,仅记录了健康受试者的数据,因此结果不能推广到病理学群体。来自最先进的深度学习框架(MotionAGFormer、MotionBERT、MMPose 2D-to-3D姿态转换以及NVIDIA BodyTrack)的关节角度,与使用OpenSim逆向运动学根据Human3.6 M数据集格式(包含17个关键点)从IMU数据计算出的关节角度进行了对比。其中,MotionAGFormer表现最为出色,实现了最低的总体均方根误差(RMSE)(9.27°±4.80°)和平均绝对误差(MAE)(7.86°±4.18°),以及最高的皮尔逊相关性(0.86±0.15)和决定系数R2(0.67±0.28)。研究结果表明,这两种技术都适用于实验室外的运动学评估。然而,它们也突显了基于视频和基于传感器的方法之间的关键权衡,包括成本、可访问性和精度。本研究明确了现成的视频模型在健康成年人中已经能够提供具有临床前景的运动学数据的情况,以及它们在哪些方面不如基于IMU的估计方法,同时为致力于开发稳健、成本效益高且用户友好的远程医疗和远程患者监测解决方案的研究人员和临床医生提供了宝贵的指导。

机器学习和可穿戴传感器的进步为在专业实验室之外捕捉和分析人类运动提供了新的机会。在真实世界条件下准确评估人类运动对于远程医疗、运动科学和康复领域至关重要。这项临床前基准研究将基于单目视频的3D人体姿态估计模型与惯性测量单元(IMUs)进行了比较,使用了包含13种具有临床相关性的日常活动的VIDIMU数据集,这些活动是通过普通视频摄像头和五个IMUs共同记录的。在本初步研究中,仅记录了健康受试者的数据,因此结果不能推广到病理学群体。来自最先进的深度学习框架(MotionAGFormer、MotionBERT、MMPose 2D-to-3D姿态转换以及NVIDIA BodyTrack)的关节角度,与使用OpenSim逆向运动学根据Human3.6 M数据集格式(包含17个关键点)从IMU数据计算出的关节角度进行了对比。其中,MotionAGFormer表现最为出色,实现了最低的总体均方根误差(RMSE)(9.27°±4.80°)和平均绝对误差(MAE)(7.86°±4.18°),以及最高的皮尔逊相关性(0.86±0.15)和决定系数R2(0.67±0.28)。研究结果表明,这两种技术都适用于实验室外的运动学评估。然而,它们也突显了基于视频和基于传感器的方法之间的关键权衡,包括成本、可访问性和精度。本研究明确了现成的视频模型在健康成年人中已经能够提供具有临床前景的运动学数据的情况,以及它们在哪些方面不如基于IMU的估计方法,同时为致力于开发稳健、成本效益高且用户友好的远程医疗和远程患者监测解决方案的研究人员和临床医生提供了宝贵的指导。

First slide
引领行业 | 聚焦麦特绘谱代谢组学整体解决方案>>
First slide
揭秘单细胞测序-深入了解这项正在改变我们开展科学研究的技术>>
First slide
对同一细胞中的转录组和表观基因组进行同时分析(使用细胞核分离试剂盒简化样本制备工作流程)>>
First slide
「大小鼠繁育与健康管理」指导海报,点击即可免费领取电子版或实体海报>>
Previous Next
热点排行
  • 1复发性COPA突变驱动肠道肿瘤中不依赖R-spondin的Wnt激活
  • 2多巴胺受体激动剂普拉克索(pramipexole)治疗快感缺失性抑郁(anhedonic depression)的疗效及靶点结合验证(target engagement):一项随机安慰剂对照试验
  • 3通用大语言模型在临床医学基准测试中优于专用临床人工智能(AI)工具
  • 4人疫苗应答受平行细胞因子通路调控
  • 5基于mRNA的结核病疫苗BNT164a1和BNT164b1在啮齿动物模型中具有免疫原性、良好耐受性及保护效力
  • 6脂质体多柔比星联合白蛋白结合型紫杉醇±同步放化疗用于头颈部腺样囊性癌:单臂Ⅱ期研究
  • 7安罗替尼联合新辅助化疗治疗激素受体阳性/HER2阴性乳腺癌(ACNTBC):一项前瞻性、单臂、单中心Ⅱ期临床研究伴真实世界验证
  • 8Cell:小胶质细胞中的突变可能参与了阿尔茨海默病的发生
  • 9DNA高甲基化将早衰症综合征与年龄相关病理联系起来的研究
  • 10基于k-mer的全基因组关联分析(k-mer-based GWAS/KMERIA)方法赋能多倍体作物基因挖掘
生物通微信公众号
生物通新浪微博
在线客服
微信
新浪微博
我要投稿

返回顶部


生物通 版权所有

订阅Biohot解锁原文链接索取