一种实时多模态传感器融合的人体运动捕捉与姿态优化方法

本发明提供一种实时多模态传感器融合的人体运动捕捉与姿态优化方法，包括以下步骤：步骤1、获取摄像机捕获的人体运动深度视频数据作为图像库，并对图像库进行目标标注；步骤2、通过图像库训练深度图像中人体轮廓的识别模型；步骤3、通过识别模型实时获取深度视频数据中目标点的检测框及目标点的深度估计值；步骤4、将惯性测量单元数据与深度相机数据进行校正。本发明通过深度相机获取深度信息，并与惯性测量单元数据进行融合，对惯性测量单元得到的轨迹进行实时修正，使运动捕捉结果更加准确，减少漂移误差。