首页/ 新东方教育科技集团有限公司/ 专利详情

视频处理方法及装置、神经网络的训练方法及装置

基本信息

申请号 CN202111296799.X 申请日 -
公开（公告）号 CN113723385A 公开（公告）日 2021-11-30
申请公布号 CN113723385A 申请公布日 2021-11-30
分类号 G06K9/00（2006.01）I;G06K9/46（2006.01）I;G06K9/62（2006.01）I;G06N3/04（2006.01）I;G06N3/08（2006.01）I 分类 计算；推算；计数;
发明人 陈奕名;王麒铭;栾鹏龙;兰永亮;贾兆柱 申请（专利权）人 新东方教育科技集团有限公司
代理机构 北京市柳沈律师事务所 代理人 彭久云
地址 100080北京市海淀区海淀中街6号9层
法律状态 -

摘要

摘要 一种视频处理方法及装置、神经网络的训练方法及装置。该视频处理方法包括：获取至少一个帧图像和音频片段；对至少一个帧图像进行预处理，得到面部区域的嘴部特征信息；基于嘴部特征信息和音频片段，使用视频处理网络对至少一个帧图像进行处理，得到目标视频，其中，目标视频中的对象具有与音频片段同步的嘴型变化，嘴部特征信息至少用于向视频处理网络提供每个对象的面部区域和嘴部的基本轮廓，以及每个对象的面部区域和嘴部的位置关系。在该视频处理方法中，利用嘴部特征信息向视频处理网络提供脸部与嘴部的大致轮廓与位置，方便网络生成更加准确的嘴部区域，所得到的目标视频的嘴型部分匹配度更高，准确度也更高。