双模态情感识别模型训练方法及双模态情感识别方法

授权

摘要

本申请提供了一种双模态情感识别模型训练方法及双模态情感识别方法，其中，该双模态情感识别模型训练方法包括：将语音训练数据输入第一神经网络模型进行训练，以得到语音情感识别模型；将图像训练数据输入第二神经网络模型，采用第一损失函数进行第一阶段的有监督训练，以得到第一阶段的初始图像情感识别模型；将图像训练数据输入第一阶段的初始图像情感识别模型，采用第二损失函数进行第二阶段的有监督训练，以得到目标图像情感识别模型，将所述语音情感识别模型及所述目标图像情感识别模型进行决策级融合，以得到双模态情感识别模型。

基本信息

专利标题：

双模态情感识别模型训练方法及双模态情感识别方法

专利标题（英）：

暂无

公开（公告）号：

CN110556129A

申请号：

CN201910851155.9

公开（公告）日：

2019-12-10

申请日：

2019-09-09

授权号：

CN110556129B

授权日：

2022-04-19

发明人：

邹月娴张钰莹甘蕾

申请人：

北京大学深圳研究生院

申请人地址：

广东省深圳市南山区西丽街道深圳大学城北大园区H栋208室

代理机构：

北京超凡宏宇专利代理事务所(特殊普通合伙)

代理人：

张磊

优先权：

CN201910851155.9

主分类号：

G10L25/63

IPC分类号：

G10L25/63 G10L25/30 G06K9/62 G06N3/04