一种基于视频和生理信号的多模态情感识别方法及系统
基本信息
| 申请号 | CN201910353028.6 | 申请日 | - |
| 公开（公告）号 | CN111839551A | 公开（公告）日 | 2020-10-30 |
| 申请公布号 | CN111839551A | 申请公布日 | 2020-10-30 |
| 分类号 | A61B5/16(2006.01)I | 分类 | - |
| 发明人 | 王春雷;尉迟学彪;毛鹏轩 | 申请（专利权）人 | 北京入思技术集团有限公司 |
| 代理机构 | - | 代理人 | - |
| 地址 | 100083北京市海淀区学清路甲18号中关村东升科技园学院园东配楼2层224室(东升地区) | ||
| 法律状态 | - | ||
摘要
| 摘要 | 本发明提供一种基于视频和生理信号的多模态情感识别方法及系统，所述方法包括：接收用户视频图像和皮肤电生理信号数据；分别对所述视频图像和皮肤电生理信号数据进行特征提取；利用深度信念网络对所述视频图像特征和皮肤电生理信号特征进行特征选择和融合，得到多模态融合特征；以及利用支持向量机对所述多模态融合特征进行分类，从而得到最终的情绪识别结果。本发明针对多模态情感识别，采用深度信念网络实现了特征选择过程的自动化，减少了特征选择对人工经验和实验次数的依赖性，对多模态情感识别提供了新思路。 |
