本发明提供一种异常行为检测与跟踪方法、装置、可读存储介质及设备，所述方法包括：控制摄像装置巡视目标区域，并获取所述摄像装置拍摄的当前目标图片；将所述当前目标图片输入到异常行为检测模型当中进行异常行为检测，所述异常行为检测模型根据环境变化进行更新；当所述异常行为检测模型在所述当前目标图片当中识别到异常行为时，通过卡尔曼滤波算法对所述异常行为进行跟踪。本发明的异常行为检测模型能够通过自适应学习来适应环境改变，从而保证在各种环境下均能够有效、准确的识别出异常行为，进而保证异常行为不会跟踪失败。