一种深度监督与特征融合的细粒度跨媒体检索方法专利查询专利号|摘要-满商公司网

一种深度监督与特征融合的细粒度跨媒体检索方法

基本信息

申请号	CN202111334293.3	申请日	-
公开（公告）号	CN113779283A	公开（公告）日	2021-12-10
申请公布号	CN113779283A	申请公布日	2021-12-10
分类号	G06F16/483（2019.01）I;G06F16/43（2019.01）I;G06F16/45（2019.01）I;G06N3/04（2006.01）I;G06N3/08（2006.01）I	分类	计算；推算；计数;
发明人	姚亚洲;孙泽人;陈涛;张传一;沈复民	申请（专利权）人	南京码极客科技有限公司
代理机构	成都君合集专利代理事务所（普通合伙）	代理人	尹新路
地址	211899江苏省南京市浦口区新北路1号江北国际智谷B栋5层
法律状态	-

摘要

本发明涉及深度学习技术领域，公开了一种深度监督与特征融合的细粒度跨媒体检索方法，包括：步骤S1.将图像数据、视频数据、文本数据和音频数据分别输入到媒体专用网络中，将四种媒体数据子网络最后一层的全连接层进行权值共享，提取对应的原始特征；步骤S2.将原始特征利用语义信息和标签信息输入进公共空间，同时媒体数据四种子网络分别连接线性分类器，根据线性分类器内的标签信息对提取到的媒体数据的原始特征进行分类；步骤S3.预设三元组损失约束条件、分类损失约束条件和判别损失约束条件上，对公共空间内媒体数据的分类特征进行度量。本发明用于在标签空间和公共的特征表示空间内最大程度地减小判别损失并学习各媒体特征的相似性。