一种基于场景识别的中文手语翻译方法及系统

基本信息

申请号 CN202011567901.0 申请日 -
公开(公告)号 CN112668463A 公开(公告)日 2021-04-16
申请公布号 CN112668463A 申请公布日 2021-04-16
分类号 G06K9/00;G06K9/62;G06N3/04;G06N3/08 分类 计算;推算;计数;
发明人 陈斌;牟中强 申请(专利权)人 株洲手之声信息科技有限公司
代理机构 湖南兆弘专利事务所(普通合伙) 代理人 周长清;胡君
地址 412007 湖南省株洲市天元区韶山路229号株洲(湖南)炎帝专修大学
法律状态 -

摘要

摘要 本发明公开一种基于场景识别的中文手语翻译方法及系统,该方法步骤包括:S1.构建手语单词识别模型,以及构建场景识别模型,将手语单词识别模型与场景识别模型进行级联,形成手语翻译模型;S2.对手语翻译模型进行训练,直至场景识别模型与手语单词识别模型达到动态平衡;S3.采集待翻译的手语动作视频并提取出手语动作数据;S4.将手语动作数据输入至训练后的手语翻译模型的场景识别模型中,识别出当前的场景类型;根据识别出的场景类型,使用训练后的手语翻译模型中手语单词识别模型对当前手语动作数据进行识别,得到手语单词的翻译结果输出。本发明具有实现方法简单、成本低、精度以及效率高且可靠等优点。