本发明公开了一种基于WSHRRPCA算法的语音增强方法，主要解决有色噪声环境下现有算法语音增强效果差问题，具体为：利用含噪语音样本建立白化模型，在时域使用该模型对含噪语音进行白化处理后用短时傅里叶变换获取其时频幅度谱和时频相位谱；通过哈希函数映射法将时频幅度谱每一列中的谱元素排列顺序进行打乱重排，再用鲁棒主成分分析算法将其分解得到增强时频幅度谱并恢复排列顺序；利用增强时频幅度谱和时频相位谱组成增强时频谱，重构出完整的时域白化增强语音信号，使用白化模型对该信号进行逆白化处理得到增强语音。本发明能够有效消除含噪语音中的多种噪声，达到语音增强的目的，可应用于语音接收系统、语音编码系统和语音识别系统。