本发明公开了一种视频目标检测最佳级联配置的快速搜索方法及系统，该方法包括：获取视频数据集并对视频数据集进行特征计算，得到场景特征组合；基于帧间相似度对视频数据集执行帧过滤操作；基于优化的配置搜索算法，获取视频数据集中达到精度要求且成本最低的最佳级联配置方案，并构建得到带标签的训练集；基于训练集训练级联方案映射器，得到训练完成的级联方案映射器；获取待测视频并基于训练完成的级联方案映射器搜索最佳配置，完成目标检测任务。该系统包括：特征计算模块、过滤模块、搜索模块、训练模块和检测模块。通过使用本发明，能够根据视频场景自动、高效获取最佳级联方案，完成目标检测。本发明可广泛应用于目标检测领域。