一种中文线索语生成方法、系统、计算机设备及存储介质
基本信息
申请号 | CN202210234048.3 | 申请日 | - |
公开(公告)号 | CN114626339A | 公开(公告)日 | 2022-06-14 |
申请公布号 | CN114626339A | 申请公布日 | 2022-06-14 |
分类号 | G06F40/126(2020.01)I;G06F3/01(2006.01)I;G06N3/04(2006.01)I;G06N3/08(2006.01)I;G06V40/20(2022.01)I | 分类 | 计算;推算;计数; |
发明人 | 刘李;冯钢 | 申请(专利权)人 | 深圳市大数据研究院 |
代理机构 | 深圳市恒和大知识产权代理有限公司 | 代理人 | - |
地址 | 518000广东省深圳市龙岗区龙城街道龙翔大道2001号道远楼225室 | ||
法律状态 | - |
摘要
摘要 | 本发明公开了一种中文线索语生成方法、系统、计算机设备及存储介质,其方法包括:分析并确定待编码元音以及待编码辅音;采集待编码元音以及所述待编码辅音对应的唇读视频数据集,将唇读视频数据集转换为多张图片;将图片输入到预设卷积神经网络模型中进行计算,获取每个待编码元音或待编码辅音对应的内嘴唇参数;将内嘴唇参数输入至预设高斯模型中进行计算,确定每个待编码元音对应的手部编码位置,及每个待编码辅音对应的手形;通过头部运动状态对音调进行编码,获取每个头部运行状态对应的音调,以形成手部编码位置以及手形,配合头部的运动状态的中文线索语。提供了一套鲁棒、高效,优化的中文线索语。 |
