一种单目鲁棒实时多人3D动捕方法、装置及计算机设备

基本信息

申请号 CN202111470825.6 申请日 -
公开(公告)号 CN114120313A 公开(公告)日 2022-03-01
申请公布号 CN114120313A 申请公布日 2022-03-01
分类号 G06V20/64(2022.01)I;G06V40/20(2022.01)I;G06V10/764(2022.01)I;G06V10/82(2022.01)I;G06K9/62(2022.01)I;G06T13/40(2011.01)I;G06T15/00(2011.01)I;G06N3/04(2006.01)N;G06N3/08(2006.01)N 分类 计算;推算;计数;
发明人 王俊翔 申请(专利权)人 北京影谱科技股份有限公司
代理机构 北京知呱呱知识产权代理有限公司 代理人 丁彦峰
地址 100125北京市朝阳区朝阳公园南路3号楼6层601内702室
法律状态 -

摘要

摘要 本发明实施例公开了一种单目鲁棒实时多人3D动捕方法、装置及计算机设备,以解决现有技术存在的需要动作人穿上特定的设备、实施成本较高等问题。通过卷积神经网络估计每个人的2D和3D姿态特征,再通过全连接的神经网络将遮挡部分2D姿态和3D姿态特征推理成完整的3D姿态,然后应用时空骨架模型拟合每个人预测的2D和3D姿态,最终渲染得到目标场景中的人形动画,实现对目标场景中多人的动作捕捉,从而无需动作人穿戴辅助设备,动作人运动不设限制,且仅依赖于单目摄像头作为采集设备,即可实现对多人体运动的实时准确捕捉,实施成本较低。