基于Transformer的标记选择和合并的表情识别方法...
授权
摘要
本发明提供基于Transformer的标记选择和合并的表情识别方法及系统,包括:将图像分割成不重叠的斑块,并通过线性投影映射到一个D维度的特征向量,构成标记嵌入向量;将其输入第一Transformer网络,得到标记特征;动态地加入α参数计算标记特征的每个标记向量的权重,将标记向量的权重的数值较大的前k个标记向量输入第二Transformer网络,得到动态标记选择的预测结果;将标记特征进行重塑,得到新的结构化特征,并合并,组成包含上下文特征的标记;将其输入第三Transformer网络编码,得到标记合并的预测结果;取动态标记选择的预测结果和标记合并的预测结果取平均,取阈值最大的为表情识别的结果。
基本信息
专利标题 :
基于Transformer的标记选择和合并的表情识别方法及系统
专利标题(英):
暂无
公开(公告)号 :
CN113705541A
申请号 :
CN202111224946.2
公开(公告)日 :
2021-11-26
申请日 :
2021-10-21
授权号 :
CN113705541B
授权日 :
2022-04-01
发明人 :
雷震杨阳陶建华翁敦芳
申请人 :
中国科学院自动化研究所
申请人地址 :
北京市海淀区中关村东路95号
代理机构 :
北京华夏泰和知识产权代理有限公司
代理人 :
李永叶
优先权 :
CN202111224946.2
主分类号 :
G06K9/00
IPC分类号 :
G06K9/00 G06K9/34 G06N3/04 G06N3/08
IPC结构图谱
G
G部——物理
G06
计算;推算或计数
G06K
数据识别;数据表示;记录载体;记录载体的处理
G06K9/00
用于阅读或识别印刷或书写字符或者用于识别图形,例如,指纹的方法或装置
法律状态
2022-04-01 :
授权
2021-12-14 :
实质审查的生效
IPC(主分类) : G06K 9/00
申请日 : 20211021
申请日 : 20211021
2021-11-26 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载