本申请公开一种模型训练样本校验方法及其装置、设备、介质、产品，所述方法包括响应作用于候选样本池中商品查询词样本及商品标题样本的类目标注事件，获取该事件为该些商品查询词样本及商品标题样本所标注的第一标注商品类目；调用第一样本类目标注模型，标注出具有第一标注商品类目的商品查询词样本及商品标题样本所对应的第二标注商品类目；将第一标注商品类目与第二标注商品类目相同的商品查询词样本或商品标题样本推送至训练样本库中；根据基于训练样本库最新训练至收敛的第二样本类目标注模型，介入第一样本类目标注模型进行更新。本申请实现自动化标注及校验训练样本，且形成模型资源的效率利用，有效地提升需部署上线的模型的推理能力。