用于训练神经网络的、包括编码在计算机存储介质上的计算机程序的方法、系统和装置，所述神经网络被配置为接收输入数据项并处理输入数据项以生成相应分数。该方法包括以下动作：获得包括多个训练项的训练数据的集合，其中每个训练项与来自预定的多个标签的集合中的相应标签相关联；以及修改训练数据以生成正则化训练数据，包括：对于每个训练项，确定是否修改与训练项相关联的标签，并且将与训练项相关联的标签改变为来自预定标签的集合的不同的标签，并在正则化数据上训练神经网络。本公开的各方面具有通过减少过度拟合来改善训练的神经网络的性能的技术效果。