本申请提供了一种人工智能安防系统测试方法、装置、存储介质及测试设备，所述方法包括：将待测安防系统的视频域名解析地址配置为测试设备的地址；接收视频获取请求，并向视频采集设备转发视频获取请求；视频获取请求用于指示视频采集设备发送原始监控视频；根据选定的场景类型，从预设的场景模拟图像库中选取目标场景模拟图像；接收原始监控视频，并根据原始监控视频和目标场景模拟图像，得到测试视频；向待测安防系统发送测试视频，并获取待测安防系统对于测试视频的安防检测结果，根据安防检测结果与选定的测试类型，得到测试结果。本申请可提高安防系统测试的便捷性。