一种中文线索语生成方法、系统、计算机设备及存储介质

基本信息

申请号 CN202210234048.3 申请日 -
公开(公告)号 CN114626339A 公开(公告)日 2022-06-14
申请公布号 CN114626339A 申请公布日 2022-06-14
分类号 G06F40/126(2020.01)I;G06F3/01(2006.01)I;G06N3/04(2006.01)I;G06N3/08(2006.01)I;G06V40/20(2022.01)I 分类 计算;推算;计数;
发明人 刘李;冯钢 申请(专利权)人 深圳市大数据研究院
代理机构 深圳市恒和大知识产权代理有限公司 代理人 -
地址 518000广东省深圳市龙岗区龙城街道龙翔大道2001号道远楼225室
法律状态 -

摘要

摘要 本发明公开了一种中文线索语生成方法、系统、计算机设备及存储介质,其方法包括:分析并确定待编码元音以及待编码辅音;采集待编码元音以及所述待编码辅音对应的唇读视频数据集,将唇读视频数据集转换为多张图片;将图片输入到预设卷积神经网络模型中进行计算,获取每个待编码元音或待编码辅音对应的内嘴唇参数;将内嘴唇参数输入至预设高斯模型中进行计算,确定每个待编码元音对应的手部编码位置,及每个待编码辅音对应的手形;通过头部运动状态对音调进行编码,获取每个头部运行状态对应的音调,以形成手部编码位置以及手形,配合头部的运动状态的中文线索语。提供了一套鲁棒、高效,优化的中文线索语。