本发明公开了一种基于非同步视频的人体运动捕捉方法，通过多段目标人物的非同步视频，可以有效地恢复人物的三维运动。为了利用多段非同步视频，本发明提供了一种视频同步和运动重建的方法。本发明的实现包括：基于三维人体姿态对多段视频进行同步；基于同步后的视频进行运动重建，并利用低秩约束建模不同视点下的运动差异，实现从多段非同步视频进行高精度人体运动捕捉。本发明通过利用多段非同步视频进行更精确的运动捕捉。为了利用多段非同步视频，本发明提供了一种视频同步方法和运动重建方法，同时建模不同视频的运动差异，实现了高精度的运动捕捉。