一种基于RGBD相机的多人三维姿态估计方法

基本信息

申请号 CN202010408082.9 申请日 -
公开(公告)号 CN111597976A 公开(公告)日 2020-08-28
申请公布号 CN111597976A 申请公布日 2020-08-28
分类号 G06K9/00(2006.01)I 分类 计算;推算;计数;
发明人 秦昊;李冬平;杨颢 申请(专利权)人 杭州相芯科技有限公司
代理机构 杭州求是专利事务所有限公司 代理人 杭州相芯科技有限公司
地址 310000浙江省杭州市滨江区滨安路1197号3幢436室
法律状态 -

摘要

摘要 本发明公开了一种基于RGBD相机的多人三维姿态估计方法,该方法首先在真实人体数据集上,训练得到一个支持人体位置检测和语义分割的深度卷积网络;然后构建一个虚拟合成的人体深度图‑三维特征点数据集,通过该数据集训练得到能够从深度图中估计人体关节点的深度卷积网络;最后用户输入RGBD图片或视频,即可得到所有人体三维关节点的世界坐标。本发明给出了从单个RGBD相机恢复多人三维姿态的鲁棒算法;在网络预训练阶段,只需要预标注好的RGB图片即可,而对于深度图可以使用虚拟合成的方法自动得到,因此预训练对数据标注的需求度很小;在实际运行阶段,同时考虑单帧姿态估计和多帧姿态估计,可以输出精确同时稳定的多人三维姿态。