一种基于知识图谱和跨模态注意力的多模态反讽检测方法
实质审查的生效
摘要

本发明公开了一种基于知识图谱和跨模态注意力的多模态反讽检测方法。本发明根据Bert模型构建跨模态注意力特征向量,以及运用多模态知识图谱来获取外部信息,并对外部信息进行筛选。跨模态注意力构建的是音频信息与文本句信息以及情感值向量三者的关系,通过音频信息向量与情感值向量之间的联系与影响来计算注意力,以此来关注句中的矛盾表达。而外部知识信息的筛选,则是运用文本抽取的信息与知识图谱检索的外部信息相似度进行。最后将获取的各个类型的特征向量,输入到分类层进行分类。本发明能够很好解决了不同模态信息的融合问题,能够关注句内的矛盾也能提取不同模态的不一致性特征,能够提高反讽检测任务的准确性。

基本信息
专利标题 :
一种基于知识图谱和跨模态注意力的多模态反讽检测方法
专利标题(英):
暂无
公开(公告)号 :
CN114330334A
申请号 :
CN202111650030.3
公开(公告)日 :
2022-04-12
申请日 :
2021-12-30
授权号 :
暂无
授权日 :
暂无
发明人 :
汤景凡崔硕张旻姜明
申请人 :
杭州电子科技大学
申请人地址 :
浙江省杭州市下沙高教园区2号大街
代理机构 :
杭州君度专利代理事务所(特殊普通合伙)
代理人 :
朱月芬
优先权 :
CN202111650030.3
主分类号 :
G06F40/284
IPC分类号 :
G06F40/284  G06F40/242  G06T9/00  G06K9/62  G10L15/26  G10L25/63  
IPC结构图谱
G
G部——物理
G06
计算;推算或计数
G06F
电数字数据处理
G06F40/284
词汇分析,例如标记或搭配词
法律状态
2022-04-29 :
实质审查的生效
IPC(主分类) : G06F 40/284
申请日 : 20211230
2022-04-12 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332