基于Web采集与文本特征均衡分布的语料库构建方法
授权
摘要
一种基于Web采集与文本特征均衡分布的语料库构建方法，利用Web进行语料收集，采用基于词典的方式对预处理后的生语料进行标注，利用代表性度量模型对语料素材在语料库中的代表性进行量化并排序，形成按照降序排列的语料素材序列，利用这些序列可以实现任意规模的最逼近的语料子库。例如可以通过增量方式对电力语料库进行更新，从而建立起能够自由扩充的电力行业专用语料库。同时量化排序后的语料素材序列支持对语料库进行子集化操作，即取得一部分语料库的素材，使其尽可能地代表原始语料库的相关特性，从而开展语料库的离线应用。
基本信息
专利标题 ：
基于Web采集与文本特征均衡分布的语料库构建方法
专利标题（英）：
暂无
公开（公告）号 ：
CN109522549A
申请号 ：
CN201811273931.3
公开（公告）日 ：
2019-03-26
申请日 ：
2018-10-30
授权号 ：
CN109522549B
授权日 ：
2022-06-10
发明人 ：
林宝德张新阳张梅
申请人 ：
云南电网有限责任公司信息中心
申请人地址 ：
云南省昆明市拓东路73号
代理机构 ：
北京市天玺沐泽专利代理事务所(普通合伙)
代理人 ：
谢鑫
优先权 ：
CN201811273931.3
主分类号 ：
G06F17/27
IPC分类号 ：
G06F17/27 G06F16/35 G06F16/9535 G06Q50/06
法律状态
2022-06-10 ：
授权
2019-04-19 ：
实质审查的生效
IPC(主分类) : G06F 17/27
申请日 : 20181030
申请日 : 20181030
2019-03-26 ：
公开
注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
