首页/ 上海影谱科技有限公司/ 专利详情

基于三维重建的人脸替换方法及装置

基本信息

申请号 CN202011529456.9 申请日 -
公开（公告）号 CN112734890A 公开（公告）日 2021-04-30
申请公布号 CN112734890A 申请公布日 2021-04-30
分类号 G06T15/00;G06T19/20 分类 计算；推算；计数;
发明人 孙腾 申请（专利权）人 上海影谱科技有限公司
代理机构 北京知呱呱知识产权代理有限公司 代理人 张永维
地址 201721 上海市青浦区金泽镇（西岑）水秀路318号108室
法律状态 -

摘要

摘要 本发明公开了一种基于三维重建的人脸替换方法及装置，通过在三维人脸模型上实现人脸对齐和图像融合，再渲染成二维图像，从而有效解决少量人脸图像实现任意角度旋转换脸的需要，人脸替换重点是需要保证替换后的人脸不改变目标人脸的五官结构，同时需要表达出源人物的面部表情以及位姿。本发明基于三维重建得到人脸3D模型，在三维空间做人脸对齐，解决大角度旋转造成的替换前后人脸视角相差较大，无法有效配准对齐的问题。三维人脸重建选用3DMM模型，构建的特征向量可以实现人脸结构和表情特征的解耦分离，分别提取替换前人脸的表情特征和替换人脸的结构，组合成新的3D人脸特征，完成人脸3D模型上的表情迁移。