一种跨模态神经网络构建方法、行人检索方法及系统
基本信息
| 申请号 | CN202111302766.1 | 申请日 | - |
| 公开（公告）号 | CN113743544A | 公开（公告）日 | 2021-12-03 |
| 申请公布号 | CN113743544A | 申请公布日 | 2021-12-03 |
| 分类号 | G06K9/62（2006.01）I;G06K9/00（2006.01）I;G06N3/08（2006.01）I | 分类 | 计算；推算；计数; |
| 发明人 | 张德馨 | 申请（专利权）人 | 中科智为科技（天津）有限公司 |
| 代理机构 | 西安迪业欣知识产权代理事务所（普通合伙） | 代理人 | 校丽丽 |
| 地址 | 300450天津市滨海新区天津经济技术开发区滨海-中关村科技园泉州道3号北塘建设发展大厦B座215室 | ||
| 法律状态 | - | ||
摘要
| 摘要 | 本发明公开了一种跨模态神经网络构建方法、行人检索方法及系统，属于数据分析检索技术领域，能够解决跨模态识别精度较低，行人识别效果较差的问题。所述方法包括：获取可见光样本图像和近红外样本图像，并对可见光样本图像和近红外样本图像进行预处理，得到可见光块序列数据和近红外块序列数据；将可见光块序列数据输入至第一自注意力机制模块中，获得可见光全局特征和可见光局部特征；并将近红外块序列数据输入至第二自注意力机制模块中，获得近红外全局特征和近红外局部特征；利用可见光全局特征、可见光局部特征、近红外全局特征和近红外局部特征训练第一神经网络，得到跨模态神经网络。本发明用于跨模态图像识别。 |
