关节姿态参数的确定方法、模型训练方法及装置
公开
摘要
本公开提供的关节姿态参数的确定方法、模型训练方法及装置，涉及深度学习技术、增强现实技术和数字人技术领域，包括：获取用于驱动数字人动作的音频数据和视频数据；视频数据中包括人物动作画面；提取音频数据中包括的音频帧的音频特征，以及视频数据中包括的视频帧的动作特征；根据音频特征和动作特征，确定出关节姿态参数，关节姿态参数用于控制数字人的动作。本公开提供的方案中，能够提取视频画面中人物做出的动作特征，并融合音频数据中的音频特征，得到关节姿态参数，使得关节姿态参数符合人物动作的特征，又符合音频数据中的音频特征，从而实现数字人的高效、高精度驱动。
基本信息
专利标题 ：
关节姿态参数的确定方法、模型训练方法及装置
专利标题（英）：
暂无
公开（公告）号 ：
CN114630190A
申请号 ：
CN202210193587.7
公开（公告）日 ：
2022-06-14
申请日 ：
2022-02-28
授权号 ：
暂无
授权日 ：
暂无
发明人 ：
郭紫垣赵亚飞张世昌范锡睿
申请人 ：
北京百度网讯科技有限公司
申请人地址 ：
北京市海淀区上地十街10号百度大厦2层
代理机构 ：
北京同立钧成知识产权代理有限公司
代理人 ：
霍莉莉
优先权 ：
CN202210193587.7
主分类号 ：
H04N21/81
IPC分类号 ：
H04N21/81 G06V40/20 G06V10/40 G06V10/774
法律状态
2022-06-14 ：
公开
注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
