本发明提供一种目标跟踪方法及装置，应用于存储有各目标对象对应的特征模型的服务器。所述方法包括：对当前视频帧图像进行目标检测，并根据检测得到的各待检测对象的位置信息提取出对应的CNN特征；根据各待检测对象的位置信息及CNN特征，与上一视频帧图像中各目标对象的位置信息及特征模型，计算得到对应的相似度矩阵；基于相似度矩阵将各待检测对象与各目标对象进行数据关联，得到最优匹配结果；若最优匹配结果中存在与对应目标对象匹配成功的待检测对象时，根据待检测对象的CNN特征对对应特征模型进行更新，并基于所述待检测对象得到对应的跟踪结果。所述方法抗干扰能力强，跟踪成功率高，可持续对目标对象进行跟踪。