基于骨架视频的行为识别方法

基本信息

申请号 CN201910511925.5 申请日 -
公开(公告)号 CN110309732A 公开(公告)日 2019-10-08
申请公布号 CN110309732A 申请公布日 2019-10-08
分类号 G06K9/00;G06N3/04;G06N3/08 分类 计算;推算;计数;
发明人 叶帆帆;唐慧明;陈明芽 申请(专利权)人 华雁智科(杭州)信息技术有限公司
代理机构 杭州宇信知识产权代理事务所(普通合伙) 代理人 王健
地址 310058 浙江省杭州市西湖区余杭塘路866号
法律状态 -

摘要

摘要 本发明公开了一种基于骨架视频的行为识别方法,方法流程包括:通过对数据集中的每一段视频抽帧得到视频训练样本,并提取各帧的骨架关节点信息;根据骨架关节点物理连接关系初始化骨架关节点连接关系矩阵,以初步训练空间域图卷积神经网络;在空间域图卷积神经网络的参数固定之后,通过空间域图卷积神经网络训练骨架关节点关系推理网络,得到新的骨架关节点连接关系矩阵;通过新的骨架关节点连接关系矩阵更新空间域图卷积神经网络的参数;应用时,对待识视频抽帧和提取骨架关节点信息后送入骨架关节点关系推理网络得到骨架关节点连接关系矩阵,将抽帧后的视频和骨架关节点连接关系矩阵送入更新后的空间域图卷积神经网络,以得到行人行为类别。