数字人生成模型、模型的训练方法以及数字人生成方法
实质审查的生效
摘要
本申请实施例提供了一种数字人生成模型、模型的训练方法以及数字人生成方法,数字人生成模型包括:数据采集模块、数据预处理模块、模型训练模块、预测处理模块。模型的训练方法包括:采集训练样本视频数据、对训练样本视频数据进行预处理、对所述音频数据进行特征提取、训练预设的第一神经网络模型、训练预设的第二神经网络模型,生成预测人脸图片、合成数字人视频。数字人生成方法包括:对视频数据进行人脸检测和裁剪,生成裁剪图片和遮住嘴部区域的人脸图片、将音频数据、人脸关键点数据和遮住嘴部区域的人脸图片输入至数字人生成模型中,生成数字人视频、将音频数据输入至数字人视频中,生成带有声音的二维数字人视频。
基本信息
专利标题 :
数字人生成模型、模型的训练方法以及数字人生成方法
专利标题(英):
暂无
公开(公告)号 :
CN114419702A
申请号 :
CN202111670351.X
公开(公告)日 :
2022-04-29
申请日 :
2021-12-31
授权号 :
暂无
授权日 :
暂无
发明人 :
司马华鹏王培雨
申请人 :
南京硅基智能科技有限公司
申请人地址 :
江苏省南京市雨花台区凤信路20号万博科技园C号楼4层
代理机构 :
北京弘权知识产权代理有限公司
代理人 :
逯长明
优先权 :
CN202111670351.X
主分类号 :
G06V40/16
IPC分类号 :
G06V40/16 G06V10/774 G06V10/80 G06V10/82 G06K9/62 G06N3/04 G06N3/08 G10L25/30 G10L25/57
法律状态
2022-05-20 :
实质审查的生效
IPC(主分类) : G06V 40/16
申请日 : 20211231
申请日 : 20211231
2022-04-29 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载