一种引入反馈机制的多RGB相机实时人体动作捕捉系统

基本信息

申请号 CN202110194157.2 申请日 -
公开(公告)号 CN112907631A 公开(公告)日 2021-06-04
申请公布号 CN112907631A 申请公布日 2021-06-04
分类号 G06T7/246;G06T7/292;G06T7/80;G06T17/00;G06T5/30 分类 计算;推算;计数;
发明人 于涛;张宇翔;戴翘楚 申请(专利权)人 北京未澜科技有限公司
代理机构 - 代理人 -
地址 100083 北京市海淀区橡树湾一期一号楼一单元1703室
法律状态 -

摘要

摘要 本发明提出了一种引入反馈机制的多RGB相机实时人体动作捕捉系统,主要包括平台搭建、数据处理、姿态重建及反馈优化等步骤,结合深度学习的技术来完成人体姿态的估计,通过引入人体线性蒙皮模型以及人手检测器,对于末端交互关节的检测分辨率大大提升,从而提高了严重遮挡下的交互性能。通过引入反馈机制,将上一帧的人体模型渲染到当前帧并进行腐蚀膨胀处理,得到当前帧的启发式算法的一个合理初值,并且引入了三维的可见性信息,避免了歧义性,从而可以提高算法的收敛速度和精度,从而完成一个实时的无佩戴标记的人体重建系统,并且对于繁杂环境也具有鲁棒性。