基于块文字占比的网页正文信息提取方法
授权
摘要

本发明涉及信息提取技术,其公开了一种基于块文字占比的网页正文信息提取方法,解决传统技术中的提取方案容易受到HTML是否良构、网页正文和广告文字占比等的影响以及不能兼顾提取准确性和提取效率的问题。该方法包括以下步骤:步骤1、将网页文件读入字符串中,遍历字符串,对其中的字符进行大小写统一处理;步骤2、删除与主题信息无关的标签内容;步骤3、根据标签配对从字符串中取出head和body两部分;步骤4、在head部分中查找并提取网页正文标题字符串;步骤5、进行网页分块;步骤6、清洗无关的内容块;步骤7、计算每个内容块在全文中的占比,并排序;步骤8、进行标题匹配,确定正文块位置;步骤9、从正文块中提取网页正文。

基本信息
专利标题 :
基于块文字占比的网页正文信息提取方法
专利标题(英):
暂无
公开(公告)号 :
CN109543126A
申请号 :
CN201811377444.1
公开(公告)日 :
2019-03-29
申请日 :
2018-11-19
授权号 :
CN109543126B
授权日 :
2022-04-29
发明人 :
刘婵唐军
申请人 :
四川长虹电器股份有限公司
申请人地址 :
四川省绵阳市高新区绵兴东路35号
代理机构 :
成都虹桥专利事务所(普通合伙)
代理人 :
吴中伟
优先权 :
CN201811377444.1
主分类号 :
G06F16/957
IPC分类号 :
G06F16/957  
IPC结构图谱
G
G部——物理
G06
计算;推算或计数
G06F
电数字数据处理
G06F16/957
•••浏览优化,例如通过缓存
法律状态
2022-04-29 :
授权
2019-04-23 :
实质审查的生效
IPC(主分类) : G06F 16/957
申请日 : 20181119
2019-03-29 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332