基于表情及行为特征提取的通过视频评估学习专注力的方法
授权
摘要
本发明提出一种基于表情及行为特征提取的通过视频评估学习专注力的方法，首先通过人体骨骼点检测方法AlphaPose获取人体骨架，通过轻量化人脸检测模型检测人脸；接着将骨架编码转换为图像，通过神经网络分类器进行动作分类；将获取到的人脸框，先通过VGG‑A网络提取特征，再经过Segmentation网络进一步拟合得到精确的人脸位置，接着将人脸裁剪为多个区域，并使用CNN网络提取特征，通过自注意力模块对不同人脸区域进行加权，融合多个区域的局部特征形成整体特征进行表情分类；最后融合动作和表情识别结果，通过LSTM网络得到最终的专注力分析结果。其针对学生行为构建了有效的运动特征，相对传统的动作识别难以有效地解决视角差异和动作差异带来的问题。
基本信息
专利标题 ：
基于表情及行为特征提取的通过视频评估学习专注力的方法
专利标题（英）：
暂无
公开（公告）号 ：
CN112287891A
申请号 ：
CN202011319889.1
公开（公告）日 ：
2021-01-29
申请日 ：
2020-11-23
授权号 ：
CN112287891B
授权日 ：
2022-06-10
发明人 ：
柯逍缪欣
申请人 ：
福州大学
申请人地址 ：
福建省福州市闽侯县福州大学城乌龙江北大道2号福州大学
代理机构 ：
福州元创专利商标代理有限公司
代理人 ：
丘鸿超
优先权 ：
CN202011319889.1
主分类号 ：
G06K9/00
IPC分类号 ：
G06K9/00 G06K9/62 G06N3/04
IPC结构图谱
G
G部——物理
G06
计算；推算或计数
G06K
数据识别；数据表示；记录载体；记录载体的处理
G06K9/00
用于阅读或识别印刷或书写字符或者用于识别图形，例如，指纹的方法或装置
法律状态
2022-06-10 ：
授权
2021-02-23 ：
实质审查的生效
IPC(主分类) : G06K 9/00
申请日 : 20201123
申请日 : 20201123
2021-01-29 ：
公开
注：本法律状态信息仅供参考，即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载
