一种基于边缘计算终端的唇语识别方法及装置
实质审查的生效
摘要

本发明涉及一种基于边缘计算终端的唇语识别方法及装置,包括以下步骤:S1、构建唇语识别模型,通过中文唇语数据集进行模型预训练,提取出预训练模型;S2、对预训练模型进行模型压缩;S3、连续采集边缘计算终端的视频数据,作为目标数据集进行保存;S4、对目标数据集进行预处理;S5、根据目标数据集,对预训练模型进行微调训练,获得轻量化模型;S6、优化轻量化模型,适配边缘计算终端的硬件平台并部署到边缘计算终端,采集用户的视频数据,识别用户的唇语信息,输出用户指令的识别结果。与现有技术相比,本发明具有提高语音识别的识别效果和准确性,提高唇语识别模型的鲁棒性,有利于部署在计算能力有限的边缘计算终端上等优点。

基本信息
专利标题 :
一种基于边缘计算终端的唇语识别方法及装置
专利标题(英):
暂无
公开(公告)号 :
CN114360062A
申请号 :
CN202210004835.9
公开(公告)日 :
2022-04-15
申请日 :
2022-01-05
授权号 :
暂无
授权日 :
暂无
发明人 :
薛广涛赖皓阳张永昭
申请人 :
上海交通大学
申请人地址 :
上海市闵行区东川路800号
代理机构 :
上海科盛知识产权代理有限公司
代理人 :
宣慧兰
优先权 :
CN202210004835.9
主分类号 :
G06V40/20
IPC分类号 :
G06V40/20  G06V20/40  G06N3/08  G10L15/26  
法律状态
2022-05-03 :
实质审查的生效
IPC(主分类) : G06V 40/20
申请日 : 20220105
2022-04-15 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332