一种基于多模态注意力机制的跨模态哈希方法及系统

授权

摘要

本发明属于多模态注意力机制和跨模态哈希网络融合领域，提供了一种基于多模态注意力机制的跨模态哈希方法和系统。该方法包括：训练过程和检索过程，训练过程：将相同语义的图像文本对以及其所属的类标签输入到多模态注意力机制的跨模态哈希网络模型中进行训练，直至多模态注意力机制的跨模态哈希网络模型收敛，得到训练好的多模态注意力机制的跨模态哈希网络模型；检索过程：将待查询的图像或文本输入训练好的多模态注意力机制的跨模态哈希网络模型，根据相似度的大小，得到检索到的前k个文本或图像。

基本信息

专利标题：

一种基于多模态注意力机制的跨模态哈希方法及系统

专利标题（英）：

暂无

公开（公告）号：

CN113095415A

申请号：

CN202110407112.9

公开（公告）日：

2021-07-09

申请日：

2021-04-15

授权号：

CN113095415B

授权日：

2022-06-14

发明人：

鲁芹吴吉祥

申请人：

齐鲁工业大学

申请人地址：

山东省济南市长清区大学路3501号

代理机构：

济南圣达知识产权代理有限公司

代理人：

祖之强

优先权：

CN202110407112.9

主分类号：

G06K9/62

IPC分类号：

G06K9/62 G06K9/46 G06N3/04 G06N3/08