一种轻量化文字识别模型设计方法、系统、装置及介质
公开
摘要

本发明公开了一种轻量化文字识别模型设计方法、系统、装置及介质,其中方法包括:选取基准模型:采用基于卷积递归神经网络的文本行识别模型作为基准模型;网络结构搜索:采用ProxylessNAS网络结构搜索算法搜索适用于文字识别任务的主干网络,使用LayeNorm层作为特征序列的归一化层;知识蒸馏:采用基于特征的知识蒸馏方法提升轻量化模型性能,基于SVD分解对蒸馏方法中回归器权重进行赋值,对教师模型提取的特征进行降维;蒸馏辅助网络结构搜索:通过在网络搜索过程中加入蒸馏学习辅助搜索过程。本发明通过将知识蒸馏与网络结构搜索模型进行有机结合,解决现有方法计算量与存储量过大问题,使得文字识别模型能够部署到移动端设备上,可广泛应用于人工智能技术领域。

基本信息
专利标题 :
一种轻量化文字识别模型设计方法、系统、装置及介质
专利标题(英):
暂无
公开(公告)号 :
CN114596569A
申请号 :
CN202210128901.3
公开(公告)日 :
2022-06-07
申请日 :
2022-02-11
授权号 :
暂无
授权日 :
暂无
发明人 :
谢灿宇金连文林炜丰彭德智
申请人 :
华南理工大学
申请人地址 :
广东省广州市天河区五山路381号
代理机构 :
广州嘉权专利商标事务所有限公司
代理人 :
郑宏谋
优先权 :
CN202210128901.3
主分类号 :
G06V30/40
IPC分类号 :
G06V30/40  G06K9/62  G06N3/04  G06N3/08  G06V10/764  G06V10/82  G06V30/19  
法律状态
2022-06-07 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332