一种实时音频驱动的虚拟人物口型同步控制方法

基本信息

申请号 CN201911314031.3 申请日 -
公开(公告)号 CN111081270A 公开(公告)日 2021-06-01
申请公布号 CN111081270A 申请公布日 2021-06-01
分类号 G10L21/10;G10L21/18;G10L25/57;G10L15/02;H04N21/43 分类 乐器;声学;
发明人 朱风云;陈博 申请(专利权)人 大连即时智能科技有限公司
代理机构 - 代理人 -
地址 116000 辽宁省大连市大连高新技术产业区火炬路32A号B座21层2102室
法律状态 -

摘要

摘要 本发明属于虚拟人物姿态控制领域,具体涉及一种实时音频驱动的虚拟人物口型同步控制方法。该方法包括如下步骤:从实时语音流中识别出视素概率的步骤;对所述视素概率进行滤波的步骤;将所述视素概率的采样率转换为和虚拟人物渲染帧率相同的采样率的步骤;将所述视素概率转换为标准口型配置并进行口型渲染的步骤。该方法可以避免要求在传递音频流时同步传递音素序列或口型序列信息,可以显著降低系统复杂性、耦合度和实现难度,适用于各种在显示设备上渲染虚拟人物的应用场景。