本实用新型公开了一种无人值守目标智能识别与自动跟踪系统，包括：可疑目标智能识别模块，其包括电荷耦合器件CCD，将输出的图像信号输入到能够进行处理的现场计算机中；自动跟踪模块，与可疑目标智能识别模块相连，它包括现场计算处理单元，接收来自于可疑目标智能识别模块中的处理信号，其输出端与云台相连接，云台驱动电荷耦合器件CCD采集可疑目标图像，并通过图像采集卡传入到现场计算处理单元中；控制室计算机，与可疑目标智能识别模块和自动跟踪模块相连，对可疑目标智能识别模块和自动跟踪模块进行数据监控及处理。本实用新型可以完成运动目标的分类识别，并自动生成运动物体的运动轨迹，驱动云台实现对运动物体的跟踪。