细粒度行为识别模型构建方法及系统

基本信息

申请号 CN202111197488.8 申请日 -
公开(公告)号 CN113920583A 公开(公告)日 2022-01-11
申请公布号 CN113920583A 申请公布日 2022-01-11
分类号 G06V40/20(2022.01)I;G06V20/40(2022.01)I;G06V20/52(2022.01)I;G06V10/764(2022.01)I;G06N3/04(2006.01)I;G06N3/08(2006.01)I 分类 计算;推算;计数;
发明人 王海滨;纪文峰 申请(专利权)人 根尖体育科技(北京)有限公司
代理机构 济南圣达知识产权代理有限公司 代理人 李圣梅
地址 100081北京市海淀区中关村大街22号五层A座529
法律状态 -

摘要

摘要 本发明提出了细粒度行为识别模型构建方法及系统,包括:对获得的视频数据的帧序列进行关键点预测,每帧中包含人体的多个关键点坐标信息;针对帧序列,按照得到的关键点坐标为中心进行裁剪,每帧图像得到多个图像分块;将同一关键点对应的图像分块按照时序进行拼接操作,将拼接后的图像分块,按照每个图像分块对应的关键点坐标作为位置嵌入,得到处理结果;将处理结果输入至深度自注意变换网络中,通过损失函数测量真实分类结果与预测分类结果之间的误差大小,然后基于该误差对网络权值进行优化和修正,获得细粒度行为识别模型。本发明实现了更精确地预测。