本发明属于道路目标检测技术领域，公开了一种道路目标检测的困难样本的采集系统，包括：视觉路况分析模块、样本采集任务管理模块、终端样本采集模块、终端样本分析模块、终端困难样本检测上报模块、置信度小困难样本核验模块和困难样本分类入库模块。视觉路况分析模块根据采集条件使终端进行样本的采集和分析，然后通过上报模块将困难样本上报到服务器的校验模块二次筛选后录入困难样本分类入库模块。有益效果：通过服务器向浮动车分配采集任务，通过浮动车进行困难样本的初步采集和初步校验实现困难样本的第一筛选，然后将筛选得到的困难样本发送到服务器进行第二次校验和筛选得到所需的困难样本，提高了困难样本采集的速度和准确度。