本发明实施例公开了一种语音识别模型的训练方法、装置、服务器及存储介质。该方法包括：获取训练样本，训练样本包括语音信号样本以及标准输出序列，标准输出序列是标准输出文本添加辅助识别标签后的序列；通过语音识别模型对语音信号样本进行语音识别，得到语音信号样本对应的第一输出序列，第一输出序列中添加有辅助识别标签；将第一输出序列和标准输出序列进行比对，得到第一输出序列与标准输出序列的第一相似度；基于第一相似度对语音识别模型的语音识别参数进行调整，得到调整后的语音识别模型，基于训练样本对调整后的语音识别模型进行训练，得到训练后的语音识别模型。本发明可以提高语音识别模型对语音信号中语言切换点位置的预测准确度。