一种基于知识图谱的图像场景图生成方法
实质审查的生效
摘要

本发明公开了一种基于知识图谱的图像场景图生成方法,本发明首先使用OPENIE模型将图像描述转化成三元组,并转化成实体和实体对应关系,导入NEO4J中,构建COCO和VisualGenome数据集的知识图谱;其次模型结合知识图谱,对输入的图像进行目标检测,识别出对应的对象类别和对象属性,以及两两候选框之间有交集的关系。将得到的对象属性放入知识图谱中,作为检索关键点,并调用NEO4J数据库得到标记权重的关系节点以及对应的另一个实体节点;同理,将关系属性特征放入到知识图谱中,得到节点属性组;将通过知识图谱得到的指定数量的三元组放入排列模块;放入到场景图生成的网络中,最终生成基于知识图谱的场景图。本发明针对图像目标识别和关系检测的问题,提出了优化方案。

基本信息
专利标题 :
一种基于知识图谱的图像场景图生成方法
专利标题(英):
暂无
公开(公告)号 :
CN114329010A
申请号 :
CN202111638030.1
公开(公告)日 :
2022-04-12
申请日 :
2021-12-29
授权号 :
暂无
授权日 :
暂无
发明人 :
汤景凡吴志威张旻李鹏飞姜明
申请人 :
杭州电子科技大学
申请人地址 :
浙江省杭州市下沙高教园区2号大街
代理机构 :
杭州君度专利代理事务所(特殊普通合伙)
代理人 :
朱月芬
优先权 :
CN202111638030.1
主分类号 :
G06F16/51
IPC分类号 :
G06F16/51  G06F16/28  
IPC结构图谱
G
G部——物理
G06
计算;推算或计数
G06F
电数字数据处理
G06F16/51
••索引;数据结构,存储结构
法律状态
2022-04-29 :
实质审查的生效
IPC(主分类) : G06F 16/51
申请日 : 20211229
2022-04-12 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332