本发明公开了一种基于视频流的人脸识别跟踪的系统，设有临时人脸库和人脸抓拍库；临时人脸库用于对所获取的摄像机镜头下的人脸照片进行临时存储，且临时人脸库中所存储的人脸照片分别对应不同人员；临时人脸库还用于对此不同人员的基本信息和人脸跟踪结果进行临时存储；人脸抓拍库用于对临时人脸库中临时存储的人脸跟踪结束的人员的人脸照片、基本信息、人脸跟踪结果进行最终存储。本发明实现了在同一镜头下对同一人员既进行人脸识别又进行人脸跟踪的功能，解决了同一人员在同一镜头下短时间内被连续抓拍多张人脸照片的问题，避免了整个显示界面布满同一人员的人脸照片的情况。