本公开实施例公开了一种排序模型的训练方法、装置、电子设备及存储介质，该方法包括：获取样本数据对；利用排序模型对第一查询内容与第一查询结果之间的相关性进行多分类预测，得到第一相关性预测结果，以及对第一查询内容与第二查询结果之间的相关性进行多分类预测，得到第二相关性预测结果；利用第一损失函数拟合第一相关性预测结果与第一相关性等级之间的第一损失，以及拟合第二相关性预测结果与第二相关性等级之间的第二损失；根据第一相关性预测结果和第二相关性预测结果确定相关性预测比较结果；利用第二损失函数拟合相关性预测比较结果与相关性等级比较结果之间的第三损失；根据第一损失、第二损失以及第三损失调整排序模型的模型参数。