本发明涉及一种基于可见光图像的光伏板定位与缺陷检测方法及系统，其方法包括：S1：构建光伏板可见光图像数据集，按预设比例将其划分训练集和测试集；S2：利用训练集训练SEFPN语义分割网络，得到光伏板边缘掩膜图；S3：将光伏板边缘掩膜图输入轮廓筛选模块，获取光伏板的候选位置框；S4：将光伏板的候选位置框输入YOLOv5检测网络，获取光伏板缺陷类别；S5：测试集依次经过SEFPN语义分割网络、轮廓筛选模块和YOLOv5检测网络，获取光伏板的位置与缺陷类别。本发明提供的方法，可以适用于无人机航拍所得的可光伏板见光图像的批量检测，避免人为识别过程中的误检，提高光伏产业的整体效率，对于光伏产业智能化和降低光伏电站的用人成本有着较大帮助。