一种音色克隆方法、系统、装置及计算机可读存储介质
基本信息
申请号 | CN202110408975.8 | 申请日 | - |
公开(公告)号 | CN112992162B | 公开(公告)日 | 2021-08-20 |
申请公布号 | CN112992162B | 申请公布日 | 2021-08-20 |
分类号 | G10L19/16(2013.01)I;G10L25/30(2013.01)I | 分类 | 乐器;声学; |
发明人 | 黄一鸣;李一夫;陈哲乾 | 申请(专利权)人 | 杭州一知智能科技有限公司 |
代理机构 | 杭州智财黑马知识产权代理事务所(普通合伙) | 代理人 | 张勇 |
地址 | 311215浙江省杭州市萧山区萧山经济技术开发区启迪路198号F座7层 | ||
法律状态 | - |
摘要
摘要 | 本发明公开了一种音色克隆方法、系统、装置及计算机可读存储介质,方法包括以下步骤:制作多说话人数据集并处理;训练对齐模型;制作目标说话人数据集并处理;训练多说话人语音合成模型;训练多说话人声码器模型;获取具有目标说话人音色的目标人语音合成模型;将待合成文本输入至目标人语音合成模型完成语音合成。本发明的有益效果是:目标说话人的风格和音色能够被更好的学习;可以通过指定韵律标签的方式来指定韵律节奏;使用时长预测模型来进行发音序列与频谱序列的对齐,加快语音生成的推理速度;在解码阶段添加音高和能量的预测和编码,目标人语音合成模型添加了音高和能量的预测与编码,有效的提高语音合成的效果。 |
