本申请公开了一种模型训练数据的评价方法、装置及其相关设备，属于区块链技术领域。本申请在进行机器学习模型的训练时，先获取需求数据，并根据需求数据在区块链的智能合约中定义模型评价函数，然后在模型训练服务方构建初始模型，获取预训练数据，并通过预训练数据对初始模型进行预训练，接着依次获取各个数据提供方上传的训练数据，并通过训练数据对预训练模型进行迭代训练，得到训练完成的机器学习模型，基于模型评价函数计算训练数据对机器学习模型的贡献度。本申请能够对各个数据提供方提供的训练数据的质量进行分析评价，以分辨各个数据提供方提供训练数据的有效性。