多视点实时人体运动、手势、表情、纹理重建系统

基本信息

申请号 CN202010810382.X 申请日 -
公开(公告)号 CN111932678B 公开(公告)日 2021-05-14
申请公布号 CN111932678B 申请公布日 2021-05-14
分类号 G06T17/20;G06N3/04;G06N3/08;G06T7/80;G06T7/73;G06T7/90;G06T15/04;G06T15/20 分类 计算;推算;计数;
发明人 张宇翔;安亮;戴翘楚;于涛 申请(专利权)人 北京未澜科技有限公司
代理机构 - 代理人 -
地址 100086 北京市海淀区成府路45号中关村智造大街A座四层419
法律状态 -

摘要

摘要 本发明提供了一种多视点实时人体运动、手势、表情、纹理重建系统,该多视点实时人体运动、手势、表情、纹理重建系统包括:将多个相机架围出捕捉区域,通过相机标定方法标定所述多个相机的相机内参和相机外参;通过标定后的所述多个相机采集人体图像,并对所述人体图像进行处理以使所述人体图像转码成RGB图像,然后完成单目的人体姿态估计;通过单目的所述人体姿态估计得到人体各个关节的热点图和关节亲和度,对关节热点图进行非极大值抑制得到各个关节坐标;从而得到人体三维关节坐标,从而得到人体三维重建模型。本系统利用深度学习来完成人体姿态的估计,在试验环境下,可以实时对多人的人体模型进行拟合与渲染。