一种虚拟人讲课视频生成方法、系统、装置及存储介质专利查询专利号|摘要-满商公司网

一种虚拟人讲课视频生成方法、系统、装置及存储介质

基本信息

申请号	CN202110434673.8	申请日	-
公开（公告）号	CN113194348A	公开（公告）日	2021-07-30
申请公布号	CN113194348A	申请公布日	2021-07-30
分类号	H04N21/43（2011.01）I;H04N21/8547（2011.01）I;H04N21/44（2011.01）I;G10L13/02（2013.01）I;G06K9/00（2006.01）I;G06F40/279（2020.01）I;G06T13/40（2011.01）I	分类	电通信技术;
发明人	李权;王伦基;叶俊杰;朱杰;成秋喜;韩蓝青	申请（专利权）人	赛业（广州）生物科技有限公司
代理机构	广州嘉权专利商标事务所有限公司	代理人	常柯阳
地址	510530广东省广州市黄埔区香雪八路98号香雪国际公寓F栋
法律状态	-

摘要

本发明公开一种虚拟人讲课视频生成方法、系统、装置及存储介质，包括：获取讲稿内容，将讲稿内容转换为语音，并根据讲稿内容生成讲稿视频；根据讲稿内容或语音匹配出人物动作；将语音、人物动作输入至高清视频人物同步唇形模型，得到与语音同步的人脸唇形图像序列；将虚拟人老师形象以及人脸唇形图像序列输入至视频驱动虚拟人物模型，得到高清虚拟人讲课视频；将高清虚拟人讲课视频输入视频抠图模型，得到无背景虚拟人讲课视频；将无背景虚拟人讲课视频嵌入至讲稿视频中，得到虚拟人老师讲课视频。本发明只需要一份讲稿和一张虚拟人老师形象，即可生成生动形象的虚拟人老师讲课视频，大大缩短视频课程内容制作与打磨的时间。本发明可广泛应用于教学技术领域内。