一种非正常发音人的语音合成方法及系统，模型训练阶段包括训练基础合成模型；训练第一目标发音人频谱预测模型；训练第二目标发音人神经网络声码器；训练第一目标发音人到第二目标发音人的转换模型；语音合成阶段包括对输入的文本进行解析，将得到的音素表征作为输入送到第一目标发音人频谱预测模型，得到输入文本的频谱参数；将得到的输入文本的频谱参数作为输入送到转换模型，得到转换后的频谱参数；将转换后的频谱参数作为输入送到神经网络声码器，得到具有第二目标发音人音色的合成语音。本发明可以正常发音的人模仿非正常发音人的发音，构建两个发音人之间的转换关系，不需要非正常发音人的音库，对正常发音的人的数据量要求降低。