一种基于深度学习的纯视觉轻量手语识别系统

基本信息

申请号 CN202011349613.8 申请日 -
公开(公告)号 CN112487939A 公开(公告)日 2021-03-12
申请公布号 CN112487939A 申请公布日 2021-03-12
分类号 G06K9/00;G06K9/46;G06K9/62;G06N3/04;G06N3/08;G06F40/211;G06F40/284 分类 计算;推算;计数;
发明人 吴宗正;李凌;刘云云;辜嘉 申请(专利权)人 深圳市热丽泰和生命科技有限公司
代理机构 - 代理人 -
地址 518000 广东省深圳市南山区招商街道南海大道1077号北科创业大厦601室
法律状态 -

摘要

摘要 本发明属于手语识别领域,尤其公开了一种基于深度学习的纯视觉轻量手语识别系统,现提出如下方案,包括数据获取、手势特征提取、时序特征提取和句子生成,所述数据获取为待识别手语视频的获取及图像预处理,所述手势特征提取为从手语视频中各帧获取手势特征向量,所述时序特征提取为从手势特征向量序列中提取手语词信息,所述句子生成为对所有手语词信息按照上下文组合成文本句子。本发明只需要输入图像数据即可通过运算输出句子,无需额外附加信息,总体网络结构简单高效,训练周期短,适合在移动端部署。只需要一个终端设备即可运行该程序,大大提高了使用便利性,有利于大面积推广。