基于多部件特征融合的行人检测多目标跟踪系统及方法

基本信息

申请号 CN202210579638.X 申请日 -
公开(公告)号 CN114677633A 公开(公告)日 2022-06-28
申请公布号 CN114677633A 申请公布日 2022-06-28
分类号 G06V20/40(2022.01)I;G06V20/52(2022.01)I;G06V40/10(2022.01)I;G06V10/82(2022.01)I;G06V10/80(2022.01)I;G06V10/74(2022.01)I;G06K9/62(2022.01)I;G06N3/04(2006.01)I;G06N3/08(2006.01)I 分类 计算;推算;计数;
发明人 张文广;王军;徐晓刚;何鹏飞;曹卫强;朱亚光 申请(专利权)人 之江实验室
代理机构 杭州浙科专利事务所(普通合伙) 代理人 -
地址 310023浙江省杭州市余杭区中泰街道之江实验室南湖总部
法律状态 -

摘要

摘要 本发明公开了基于多部件特征融合的行人检测多目标跟踪系统及方法,首先,获取行人图像数据集并进行行人多部件标注;其次,构造并训练基于多部件特征融合的行人检测多目标跟踪系统,系统包括沙漏模块、目标尺寸回归模块、目标中心点偏移回归模块、目标中心点热度图模块和多部件特征融合模块;然后,基于所述训练得到的模型进行推理获取单帧行人检测结果及多帧的行人融合特征;其次,计算当前帧检测得到的行人特征与前一帧轨迹的融合特征的相似度;最终,利用所述相似度矩阵进行数据关联,生成当前帧的行人轨迹,并更新轨迹的特征。本方法耗时较低,且对遮挡问题鲁棒性较好。