使用基于注意力的融合网络的多媒体数据语义分析系统和方法
实质审查的生效
摘要
一种多媒体数据分析系统和方法。该系统包括计算设备,该计算设备包括处理器和存储计算机可执行代码的存储设备。计算机可执行代码在处理器处执行时被配置为:将任务描述和任务元信息编码为拼接任务向量;将上下文文本和上下文元信息编码为拼接上下文文本向量;将上下文图像和上下文元信息编码为拼接上下文图像向量;对拼接任务向量、拼接上下文文本向量和拼接上下文图像向量执行双重协同注意力,以获得被注意的任务向量和被注意的上下文向量;对被注意的任务向量和被注意的上下文向量执行BiLSTM,以获得任务编码和上下文编码;以及对任务编码和上下文编码进行解码,以获得对任务的回答。
基本信息
专利标题 :
使用基于注意力的融合网络的多媒体数据语义分析系统和方法
专利标题(英):
暂无
公开(公告)号 :
CN114556443A
申请号 :
CN202180005941.2
公开(公告)日 :
2022-05-27
申请日 :
2021-01-15
授权号 :
暂无
授权日 :
暂无
发明人 :
刘石竹陶阳杨尚林陈力周辉
申请人 :
北京京东尚科信息技术有限公司;京东美国科技公司
申请人地址 :
北京市海淀区知春路76号8层
代理机构 :
中科专利商标代理有限责任公司
代理人 :
张松
优先权 :
CN202180005941.2
主分类号 :
G06V10/26
IPC分类号 :
G06V10/26 G06V10/50 G06V10/82 G06V10/80 G06V10/764 G06N3/04 G06N3/08
法律状态
2022-06-14 :
实质审查的生效
IPC(主分类) : G06V 10/26
申请日 : 20210115
申请日 : 20210115
2022-05-27 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载