一种多模态信息融合的短视频情感判定装置及方法
基本信息
| 申请号 | CN202110273165.6 | 申请日 | - |
| 公开（公告）号 | CN112668559A | 公开（公告）日 | 2021-06-18 |
| 申请公布号 | CN112668559A | 申请公布日 | 2021-06-18 |
| 分类号 | G06K9/00;G06K9/32;G06K9/62;G06N3/04;G06N3/08;G10L15/16;G10L15/26;G10L25/63 | 分类 | 计算；推算；计数; |
| 发明人 | 苏旋;郭轩;魏凤仙 | 申请（专利权）人 | 冠传网络科技（上海）有限公司 |
| 代理机构 | - | 代理人 | - |
| 地址 | 210000 江苏省南京市鼓楼区工农新村288号-207 | ||
| 法律状态 | - | ||
摘要
| 摘要 | 本发明公开了一种多模态信息融合的短视频情感判定方法、装置及存储介质。采用获取程序获取短视频，从所述短视频中分离出音视频，提取语音特征和文字特征，利用基于多注意力模型的融合交互信息的长短时记忆网络对上述特征进行编解码处理，得到短视频的情感分类特征向量，使用分类器进行情感分类，响应于用户的短视频展示和/或屏蔽请求，向用户展示与其查询请求相符的短视频。本发明一方面能够准确提取短视频中蕴含的有效信息，另一方面对这些独立的特征信息进行融合处理，可进一步挖掘其相互之间的内在关系，并能最终提高短视频的情感分类准确度。 |
