本申请提供一种文本去重方法、装置、设备及介质，涉及自然语言处理技术领域，通过获取预设文本库中每一文本的文本特征；根据每一文本的文本特征，确定每一文本的特征向量，并根据每一文本的特征向量生成预设文本库中文本之间的特征矩阵；根据特征矩阵，确定预设文本库中文本之间的相似度信息，根据相似度信息，在预设文本库中筛选出与每一文本相似的第一预设数量的文本；根据第二预设数量的文本的相似度信息以及第三预设数量的文本的相似度信息的关系，确定并去除预设文本库中的待去重文本。采用本技术方案，能够在数据量较大、CPU资源有限的情况下，提高重复的数据信息的计算效率且准确地删除重复的文本。