一种融合云和边缘计算的多模态情绪识别方法及系统

基本信息

申请号 CN201910089030.7 申请日 -
公开(公告)号 CN111665930A 公开(公告)日 2020-09-15
申请公布号 CN111665930A 申请公布日 2020-09-15
分类号 G06F3/01(2006.01)I 分类 -
发明人 王春雷;尉迟学彪;毛鹏轩 申请(专利权)人 北京入思技术集团有限公司
代理机构 - 代理人 -
地址 100083北京市海淀区学清路甲18号中关村东升科技园学院园东配楼2层224室(东升地区)
法律状态 -

摘要

摘要 本发明涉及情绪识别领域,特别是涉及一种融合云和边缘计算的多模态情绪识别方法及系统,该系统包括数据采集模块、边缘计算模块、网络传输模块、云端计算模块,以及情绪状态判定模块。数据采集模块负责人脸图像、语音相关数据的采集;边缘计算模块基于人脸表情识别技术计算本地情绪识别结果;网络传输模块传输语音数据至云端计算模块;云端计算模块负责基于语音情绪识别技术计算在线情绪识别结果,并将该结果通过网络传输模块推送至情绪状态判定模块;情绪状态判定模块则基于本地情绪识别结果和在线情绪识别结果实现对情绪状态的综合判定。上述过程仅涉及语音数据的网络传输,兼具响应速度快和识别准确率高的特点。