基于人脸识别和分层融合策略的多模态恶意迷因图检测方法
实质审查的生效
摘要
本发明公开了一种基于人脸识别和分层融合策略的多模态恶意迷因图检测方法，涉及自然语言处理技术领域。本发明引入了一种新的多模态融合模型，并对图像和文本进行多模态训练。这个多特征融合网络首先使用ResNet和YOLO‑v5提取图像特征和属性特征，然后使用属性特征和双向LSTM网络提取文本特征。在提取属性特征的同时，引入了人脸识别器来获取迷因图中人脸的种族和性别信息，这样可以更好地捕捉到仇恨情绪。然后将三种模态的特征重建并融合到一个特征向量中进行预测。评估结果表明，该模型在检测仇恨迷因图方面的性能达到了更高的水平。
基本信息
专利标题 ：
基于人脸识别和分层融合策略的多模态恶意迷因图检测方法
专利标题（英）：
暂无
公开（公告）号 ：
CN114419409A
申请号 ：
CN202210036924.1
公开（公告）日 ：
2022-04-29
申请日 ：
2022-01-12
授权号 ：
暂无
授权日 ：
暂无
发明人 ：
张益嘉候硕鲁明羽
申请人 ：
大连海事大学
申请人地址 ：
辽宁省大连市高新园区凌海路1号
代理机构 ：
大连东方专利代理有限责任公司
代理人 ：
陈丽
优先权 ：
CN202210036924.1
主分类号 ：
G06V10/80
IPC分类号 ：
G06V10/80 G06V10/764 G06V10/82 G06V40/16 G06K9/62 G06N3/04 G06N3/08
法律状态
2022-05-20 ：
实质审查的生效
IPC(主分类) : G06V 10/80
申请日 : 20220112
申请日 : 20220112
2022-04-29 ：
公开
注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
