一种图像内容理解与视觉问答VQA方法、存储介质和终端
授权
摘要
本发明公开了一种图像内容理解与视觉问答VQA方法、存储介质和终端,方法包括以下步骤:将图像和待回答问题输入至训练好的预测模块进行回答;所述预测模块包括顺次连接的融合注意力模块、双线性模型和分类器,所述分类器输出回答。本发明按照“对图像和问题进行特征表示、对图像和陈述性语句进行特征表示、融合特征矩阵、根据问题特征学习图像特征、根据正确陈述性语句学习图像特征、使用正确陈述性语句正确引导模型、得出结果”的思路,完成图像内容的题解与视觉问答(VQA)任务;因此提供了一种图像和问题关键词之间的密集交互的融合注意力方法,能够学习图像和文本的密集交互,从而进行图像和问题关键词之间的关系推断。
基本信息
专利标题 :
一种图像内容理解与视觉问答VQA方法、存储介质和终端
专利标题(英):
暂无
公开(公告)号 :
CN112926655A
申请号 :
CN202110211935.4
公开(公告)日 :
2021-06-08
申请日 :
2021-02-25
授权号 :
CN112926655B
授权日 :
2022-05-17
发明人 :
匡平张婷
申请人 :
电子科技大学
申请人地址 :
四川省成都市高新区(西区)西源大道2006号
代理机构 :
成都华风专利事务所(普通合伙)
代理人 :
张巨箭
优先权 :
CN202110211935.4
主分类号 :
G06K9/62
IPC分类号 :
G06K9/62 G06N3/04 G06N3/08
IPC结构图谱
G
G部——物理
G06
计算;推算或计数
G06K
数据识别;数据表示;记录载体;记录载体的处理
G06K9/00
用于阅读或识别印刷或书写字符或者用于识别图形,例如,指纹的方法或装置
G06K9/62
应用电子设备进行识别的方法或装置
法律状态
2022-05-17 :
授权
2021-06-25 :
实质审查的生效
IPC(主分类) : G06K 9/62
申请日 : 20210225
申请日 : 20210225
2021-06-08 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载