本发明公开了一种基于图像数据处理的水射流钢轨廓形智能化打磨系统，包括打磨车体、操作装置、照明装置、动力装置、冷却系统，打磨车体中部下方设置有水射流打磨系统，打磨车体底部的后端和前端上还分别设置车体前端检测系统及车体后端检测系统；所述水射流打磨系统包括水箱、增压泵、空压机、水射流打磨刀头组件；所述车体前端检测系统采用3D结构光检测系统，用于实时生成钢轨智能化打磨方案；所述车体后端检测系统用于对钢轨打磨效果进行检查评价，评估打磨质量，对钢轨打磨方案进行迭代优化；实现对钢轨的多角度、高精度打磨，生成钢轨打磨参数方案；在线优化打磨指导方案，调整打磨参数，迭代改进打磨技术方案。