一种基于注意机制的视频描述生成模型
实质审查的生效
摘要
本发明公开了一种基于注意机制的视频描述生成模型，多模态特征提取模块和自然语言生成模块，多模态特征提取模块，用于提取视频特定类别的特征并针对每个特定类别输出特征序列向量；自然语言生成模块包括多个双向编码器和一个基于注意机制的解码器；双向编码器的个数与提取的特定类别的个数相同；双向编码器，用于分别输入特定模态特征的特征序列向量并输出该特定模态特征对应的隐藏状态向量序列；基于注意机制的解码器包括一个多模态Attention机制以及一层单向LSTMs，一个多模态Attention机制用于融合编码器输入的各类模态特征隐藏状态序列，一层单向LSTMs用于将融合的状态序列解码为单词序列。本发明提供了准确度更高的短视频描述生成模型。
基本信息
专利标题 ：
一种基于注意机制的视频描述生成模型
专利标题（英）：
暂无
公开（公告）号 ：
CN114268846A
申请号 ：
CN202010973202.X
公开（公告）日 ：
2022-04-01
申请日 ：
2020-09-16
授权号 ：
暂无
授权日 ：
暂无
发明人 ：
秦谦张春建
申请人 ：
镇江多游网络科技有限公司
申请人地址 ：
江苏省镇江市京口区新民洲朝阳路55号
代理机构 ：
南京纵横知识产权代理有限公司
代理人 ：
朱远枫
优先权 ：
CN202010973202.X
主分类号 ：
H04N21/84
IPC分类号 ：
H04N21/84 G06N3/04
法律状态
2022-04-19 ：
实质审查的生效
IPC(主分类) : H04N 21/84
申请日 : 20200916
申请日 : 20200916
2022-04-01 ：
公开
注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
