本发明公开了一种基于测试反馈的核心训练语音选择方法，该方法利用获取的测试语音进行训练建立参考模型，然后计算原始训练语音在参考模型上的似然得分，再依据似然得分对各类语音进行排序，按照一定的比例对排序后的各类语音进行选择后得到核心训练语音。通过本发明提供的数据选择方法，可以根据测试结果反馈来筛选高质量的训练语音，所得的核心训练语音结合了实际应用信息反馈，因而未来的识别性能更佳；本发明方法适用于语音识别、说话人识别、伪造语音识别等语音分类场景。