提高图像文本描述独特多样性的网络构建方法
公开
摘要
本发明公开了一种提高图像文本描述独特多样性的网络构建方法,包括构建网络模型图像数据集,提取图像数据集的全局特征gks和抽象场景图节点的区域特征,用编码器对抽象场景图节点区域特征进行编码,得到最终的区域特征对
取平均值得到平均区域编码特征
将
和gks融合,得到编码阶段输出的全局特征
将全局特征
通过双层解码器解码,得到输出
并将
通过图更新模块更新区域特征,重新计算节点权重,生成下一个单词,以此类推;构建单词精细模块和单词校正模块,使用标准的交叉熵损失训练网络,完成网络构建。本发明构建的网络在保持文本语句准确率的同时更具有独特、多样的描述。
基本信息
专利标题 :
提高图像文本描述独特多样性的网络构建方法
专利标题(英):
暂无
公开(公告)号 :
CN114625882A
申请号 :
CN202210095359.6
公开(公告)日 :
2022-06-14
申请日 :
2022-01-26
授权号 :
暂无
授权日 :
暂无
发明人 :
朱虹张雨嘉杜森史静王栋
申请人 :
西安理工大学
申请人地址 :
陕西省西安市碑林区金花南路5号
代理机构 :
西安弘理专利事务所
代理人 :
弓长
优先权 :
CN202210095359.6
主分类号 :
G06F16/36
IPC分类号 :
G06F16/36 G06N3/04 G06N3/08
IPC结构图谱
G
G部——物理
G06
计算;推算或计数
G06F
电数字数据处理
G06F16/36
••语义工具的产生,例如,本体论或词典
法律状态
2022-06-14 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载