一种基于视频-音频多模态深度学习的多人跳绳分析方法
实质审查的生效
摘要
本发明公开了一种基于视频‑音频多模态深度学习的多人跳绳分析方法,包括:获取跳绳过程的音像文件,并分离视频和音频,针对视频图像信号进行人像检测和提取,并对目标人像进行跟踪,提取目标人像的骨骼特征点坐标并进行预处理,获取单通道音频信号,将单通道音频信号进行切片和截取,并进行时频变换获得频谱信号和预处理,对预处理后的视频信号和音频信号融合得视频‑音频融合信号,将视频‑音频融合信号通过双向长短时记忆循环卷积神经网络和级联的全连接网络后,获得输出信号流并转化成方波信号,滤波后,对上升沿或下降沿进行统计分析。本发明能有效过滤非跳绳测试人员的干扰,做到更精确的跳绳统计分析。
基本信息
专利标题 :
一种基于视频-音频多模态深度学习的多人跳绳分析方法
专利标题(英):
暂无
公开(公告)号 :
CN114463784A
申请号 :
CN202210091782.9
公开(公告)日 :
2022-05-10
申请日 :
2022-01-26
授权号 :
暂无
授权日 :
暂无
发明人 :
朱亮亮熊杰
申请人 :
开望(杭州)科技有限公司
申请人地址 :
浙江省杭州市西湖区紫荆花路2号联合大厦B座321室
代理机构 :
北京慕达星云知识产权代理事务所(特殊普通合伙)
代理人 :
符继超
优先权 :
CN202210091782.9
主分类号 :
G06V40/10
IPC分类号 :
G06V40/10 G06K9/62 G06V10/774 G10L19/008 G10L25/45
法律状态
2022-05-27 :
实质审查的生效
IPC(主分类) : G06V 40/10
申请日 : 20220126
申请日 : 20220126
2022-05-10 :
公开
注:本法律状态信息仅供参考,即时准确的法律状态信息须到国家知识产权局办理专利登记簿副本。
文件下载
暂无PDF文件可下载