一种虚拟人形象视频生成方法、系统、装置及存储介质

基本信息

申请号 CN202110434686.5 申请日 -
公开(公告)号 CN113192161A 公开(公告)日 2021-07-30
申请公布号 CN113192161A 申请公布日 2021-07-30
分类号 G06T13/20(2011.01)I;G06T13/40(2011.01)I;G06N3/04(2006.01)I;G06N3/08(2006.01)I;G06K9/00(2006.01)I 分类 计算;推算;计数;
发明人 李权;叶俊杰;王伦基;朱杰;成秋喜;韩蓝青 申请(专利权)人 赛业(广州)生物科技有限公司
代理机构 广州嘉权专利商标事务所有限公司 代理人 常柯阳
地址 510530广东省广州市黄埔区香雪八路98号香雪国际公寓F栋
法律状态 -

摘要

摘要 本发明公开了一种虚拟人形象视频生成方法、系统、装置及存储介质。方法包括以下步骤:获取文本内容,并将所述文本内容转换为语音;根据所述文本内容或所述语音匹配出人物动作;将所述语音、所述人物动作输入至高清视频人物同步唇形模型,得到与所述语音同步的人脸唇形图像序列;将虚拟人形象以及所述人脸唇形图像序列输入至视频驱动虚拟人物模型,得到高清虚拟人形象视频。本发明只需要一张简单的虚拟人形象照和一段文本内容,即可生成生动形象的虚拟人物形象视频,具有更快的制作效率与更加丰富的扩展形式。本发明可广泛应用于计算机技术领域内。