本发明公开了一种带自评测机制的道路场景语义分割方法及系统，该方法包括：获取车辆行驶环境中的道路场景视频，并将预设帧数的街景原始图像进行语义分割，预测得到分割掩膜图像和运动光流信息；构建评测网络，使用视频物体分割数据集对评测网络进行训练和调优，得到自评测模型；将街景原始图像、分割掩膜图像及运动光流信息输入自评测模型，得到语义分割结果的评分。该方法通过预先构建好自评测模型，在得到语义分割结果后，使用该结果输入自评测模型，进而得到较为客观的语义分割结果的评分，该评分可以在客观上评价语义分割结果的置信度，进而为智能驾驶系统提供有效的决策依据，也可以为应用过程中无监督调优提供数据支持。