一种云存储相似数据检测方法和系统
公开
摘要
本发明提供了一种云存储相似数据检测方法和系统,方法包括:模型训练阶段,预处理训练数据,得到训练数据块;采用MinHash算法提取全部训练数据块的特征向量,得到未嵌入语义的第一向量并训练机器学习模型,训练后得到第一向量与嵌入上下文语义后的向量间的权重矩阵和训练后的模型;利用训练后的模型,以预处理训练数据相同的处理方法处理预测数据,得到预测数据块;并采用MinHash算法提取全部预测数据块的特征向量,得到预测数据的未嵌入语义的向量;将预测数据的未嵌入语义的向量与权重矩阵做矩阵乘法,得到训练数据的嵌入语义后的向量;通过Annoy算法找到最相似的数据块。本方法能够减少计算开销,解决特征值提取不稳定的问题,并提高检测精准度。
基本信息
专利标题 :
一种云存储相似数据检测方法和系统
专利标题(英):
暂无
公开(公告)号 :
CN114579046A
申请号 :
CN202210070755.3
公开(公告)日 :
2022-06-03
申请日 :
2022-01-21
授权号 :
暂无
授权日 :
暂无
发明人 :
田纹龙何婷婷叶旭明薛晓晔李瑞轩万亚平欧阳纯萍刘永彬刘征海刘洋
申请人 :
南华大学
申请人地址 :
湖南省衡阳市常胜西路28号
代理机构 :
武汉知产时代知识产权代理有限公司
代理人 :
郝明琴
优先权 :
CN202210070755.3
主分类号 :
G06F3/06
IPC分类号 :
G06F3/06 G06F16/14 G06F16/174 G06F16/182 G06N20/00
IPC结构图谱
G
G部——物理
G06
计算;推算或计数
G06F
电数字数据处理
G06F3/048
基于图形用户界面的交互技术
G06F3/06
来自记录载体的数字输入,或者到记录载体上去的数字输出
法律状态
2022-06-03 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载