一种基于多模态预训练模型的组合商品检索方法及系统
实质审查的生效
摘要

本发明公开了一种基于多模态预训练模型的组合商品检索方法及系统,其中方法包括步骤如下:将商品图像划分为单品图像和组合品图像;训练一个组合商品图像检测器;获取并结合组合商品图像中文本模态和图片模块的特征编码、位置编码和分段编码,学习嵌入表示,并输入构建好的多模态预训练模型;通过商品检测器提取的边界框和边界框特征作为图像特征,结合文本特征,输入多模态预训练模型进行自监督训练;采用多模态预训练模型提取单品图像的图片模态和文本模态的检索特征,并存放于检索库中;多模态预训练模型根据组合品图像中每个目标商品的边界框及边界框特征,提取图文融合的检索特征,计算组合品特征与检索库中单品特征的预先距离作为商品相似度,选取最相似的单品作为结果返回。

基本信息
专利标题 :
一种基于多模态预训练模型的组合商品检索方法及系统
专利标题(英):
暂无
公开(公告)号 :
CN114445201A
申请号 :
CN202210143468.0
公开(公告)日 :
2022-05-06
申请日 :
2022-02-16
授权号 :
暂无
授权日 :
暂无
发明人 :
詹巽霖吴洋鑫董晓梁小丹
申请人 :
中山大学
申请人地址 :
广东省广州市海珠区新港西路135号
代理机构 :
广州粤高专利商标代理有限公司
代理人 :
禹小明
优先权 :
CN202210143468.0
主分类号 :
G06Q30/06
IPC分类号 :
G06Q30/06  
IPC结构图谱
G
G部——物理
G06
计算;推算或计数
G06Q
专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q30/00
商业,例如购物或电子商务
G06Q30/06
购买、出售或租赁交易
法律状态
2022-05-24 :
实质审查的生效
IPC(主分类) : G06Q 30/06
申请日 : 20220216
2022-05-06 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332