本发明公开了一种可见光与红外双光相机旋转矩阵自动校准方法，其具体实现流程如下：步骤一、标定可见光相机与红外相机的焦距，步骤二、可见光相机到红外相机旋转矩阵的初始化，步骤三、可见光相机对每一帧进行人脸检测，如果检测出人脸框，则将当前帧的全部人脸框坐标、以及当前帧的时间信息打包发送给红外相机。本发明能够应用于红外相机与可见光相机组成的双目相机中，在物理结构确定的情况下，可以实时自动校准旋转矩阵，使可见光人脸框与红外人脸框达到最大的匹配，该算法的实时性，能够有效的避免由于镜头畸变造成视频边缘区域，人脸框从可见光相机转换到红外相机上时误差较大的情况。