一种虚拟人物语音与口型同步的建模与控制方法
基本信息
| 申请号 | CN201810199537.3 | 申请日 | - |
| 公开（公告）号 | CN108447474A | 公开（公告）日 | 2018-08-24 |
| 申请公布号 | CN108447474A | 申请公布日 | 2018-08-24 |
| 分类号 | G10L15/02;G10L15/06;G10L15/25;G10L13/02;G10L13/04 | 分类 | 乐器；声学; |
| 发明人 | 朱风云;陈博;张志平;庞在虎 | 申请（专利权）人 | 北京灵伴未来科技有限公司 |
| 代理机构 | - | 代理人 | - |
| 地址 | 100083 北京市海淀区王庄路1号B座5-C | ||
| 法律状态 | - | ||
摘要
| 摘要 | 本发明属于语音合成领域的虚拟人物姿态控制，具体涉及一种虚拟人物语音与口型同步的建模与控制方法。目的是减少口型动画数据标注量，并获得准确、自然流畅并与声音同步的口型动作。该方法包括：产生待同步语音对应的音素序列；将音素序列转换为音素类别序列；将音素类别序列转换为静态口型配置序列；通过动态模型将在时间轴上排布的静态口型配置序列转换为动态变化的口型配置；将动态变化的口型配置渲染成虚拟人物头颈部的姿态形象，同步配合语音信号进行展示。该方法可以不依赖于口型动画数据，并利用语音学先验知识和动态模型实现高效自然的虚拟人物口型同步控制。 |
