本发明涉及降水观测技术领域，具体是一种自动识别与预测雨量的方法及其装置，自动识别与预测雨量的方法，包括：1)获取一地点的历史降雨图像数据及当时的时降雨量，根据时降雨量大小，赋予对应降雨图像雨量等级标签；2)对获取的历史降雨图像数据进行预处理，对预处理后的历史降雨图像数据进行雨量大小的预测与识别训练，训练得到的分类结果与对应的标签进行比对，计算误差；3)根据误差进行反向计算，更新模型参数，提高识别正确率；4)重复进行2)和3)两步，直到模型拟合，保存模型；5)获取同一地点当前环境下的降雨降雨图像数据，根据经历史降雨图像数据训练后模型，对预处理后的当前降雨图像数据进行雨量大小的识别与预测。