基于多模态融合的人脸预测方法及相关设备
实质审查的生效
摘要

本公开提供一种基于多模态融合的人脸预测方法及相关设备。该方法包括:获取带有纹理的3D人脸信息数据,将其划分为点云坐标和纹理图像,并将点云坐标处理成几何特征向量、纹理图像处理成纹理特征向量;将所述几何特征向量与所述纹理特征向量进行平衡处理后两两拼接,得到多个无序词向量;将多个所述无序词向量分别输入到多个预先构建的Transformer融合模型进行融合,得到多个融合特征向量;将多个所述融合特征向量输入至经过预训练的多层感知机进行预测,输出与所述3D人脸信息数据对应的预测结果。本公开提供的一种基于多模态融合的人脸预测方法及相关设备,将点云的空间几何信息与贴图的纹理图像信息融合,有效提高了人脸预测的精度。

基本信息
专利标题 :
基于多模态融合的人脸预测方法及相关设备
专利标题(英):
暂无
公开(公告)号 :
CN114463825A
申请号 :
CN202210363355.1
公开(公告)日 :
2022-05-10
申请日 :
2022-04-08
授权号 :
暂无
授权日 :
暂无
发明人 :
王光宇冯发金张平王凯
申请人 :
北京邮电大学
申请人地址 :
北京市海淀区西土城路10号
代理机构 :
北京风雅颂专利代理有限公司
代理人 :
金含
优先权 :
CN202210363355.1
主分类号 :
G06V40/16
IPC分类号 :
G06V40/16  G06V10/80  G06V10/82  G06K9/62  G06N3/04  
法律状态
2022-05-27 :
实质审查的生效
IPC(主分类) : G06V 40/16
申请日 : 20220408
2022-05-10 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
  • 联系电话
    电话:023-6033-8768
    QQ:1493236332
  • 联系 Q Q
    电话:023-6033-8768
    QQ:1493236332
  • 关注微信
    电话:023-6033-8768
    QQ:1493236332
  • 收藏
    电话:023-6033-8768
    QQ:1493236332