一种跨模态武器检索方法及系统

基本信息

申请号 CN202011411876.7 申请日 -
公开(公告)号 CN112528062A 公开(公告)日 2021-03-19
申请公布号 CN112528062A 申请公布日 2021-03-19
分类号 G06K9/62(2006.01)I;G06F16/583(2019.01)I;G06F16/332(2019.01)I 分类 计算;推算;计数;
发明人 王开业;范波;谭启涛;方能炜;谭董;敬龙儿;崔斌;蒋登位 申请(专利权)人 成都航天科工大数据研究院有限公司
代理机构 成都顶峰专利事务所(普通合伙) 代理人 曾凯
地址 610000四川省成都市天府新区华阳街道天府大道南段846号
法律状态 -

摘要

摘要 本发明涉及武器检索技术领域,公开一种跨模态武器检索方法,包括:获取被检索文本数据和被检索图像数据;基于BERT特征提取模型,在所述被检索文本数据中提取文本特征数据,并根据所述文本特征数据计算文本低维向量;基于ResNet特征提取模型,在所述被检索图像数据中提取图像特征数据,并根据所述图像特征数据计算图像低维向量;基于Attention融合和双判别器对抗网络的复合特征融合模型,对所述文本低维向量和所述图像低维向量进行特征融合以获得特征融合结果基于BM25F算法模型对所述特征融合结果进行检索,并将检索结果返回至人机交互界面。本发明不仅能实现跨模态数据的无缝融合,而且提高了武器装备的检索速度,进一步提高了军事领域的机动化、智能化水平。