基于大数据的文本分词方法、及其相关设备
实质审查的生效
摘要

本申请实施例属于大数据和人工智能领域,涉及一种基于大数据的文本分词方法、装置、计算机设备及存储介质,方法包括对待处理文本进行预处理,得到由汉字类型词元以及非汉字类型词元构成的语料库;将所述语料库中非汉字类型词元放入一元候选词库;利用前后拼接分词方法,得到二元文本片段集合,三元文本片段集合以及四元文本片段集合;删除所述二元文本片段集合,三元文本片段集合以及四元文本片段集合中满足预设条件的二元候选词、三元候选词、四元候选词,得到二元候选词库、三元候选词库以及四元候选词库。本申请还涉及区块链技术,一元候选词库、二元候选词库、三元候选词库以及四元候选词库均存储于区块链中。本申请缩短了候选词库的长度。

基本信息
专利标题 :
基于大数据的文本分词方法、及其相关设备
专利标题(英):
暂无
公开(公告)号 :
CN114548089A
申请号 :
CN202210086271.8
公开(公告)日 :
2022-05-27
申请日 :
2022-01-25
授权号 :
暂无
授权日 :
暂无
发明人 :
李斌
申请人 :
平安国际智慧城市科技股份有限公司
申请人地址 :
广东省深圳市前海深港合作区妈湾兴海大道3048号前海自贸大厦1-34层
代理机构 :
深圳市世联合知识产权代理有限公司
代理人 :
杨晖琼
优先权 :
CN202210086271.8
主分类号 :
G06F40/279
IPC分类号 :
G06F40/279  
IPC结构图谱
G
G部——物理
G06
计算;推算或计数
G06F
电数字数据处理
G06F40/279
文字实体的识别
法律状态
2022-06-14 :
实质审查的生效
IPC(主分类) : G06F 40/279
申请日 : 20220125
2022-05-27 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332