一种基于多模态融合的医学图像识别系统及方法专利查询专利号|摘要-满商公司网

一种基于多模态融合的医学图像识别系统及方法

基本信息

申请号	CN201910070049.7	申请日	-
公开（公告）号	CN109858540A	公开（公告）日	2019-06-07
申请公布号	CN109858540A	申请公布日	2019-06-07
分类号	G06K9/62（2006.01）I; G06N3/04（2006.01）I	分类	计算；推算；计数;
发明人	韩云; 翟红波	申请（专利权）人	青岛中科智康医疗科技有限公司
代理机构	成都弘毅天承知识产权代理有限公司	代理人	青岛中科智康医疗科技有限公司
地址	266109 山东省青岛市高新区火炬路100号盘谷创客空间D座206-22房间
法律状态	-

摘要

本发明公开了一种基于多模态融合的医学图像识别系统及方法，涉及医学图像检测领域，其系统包括用于构建2D‑CNN结构获取钼靶图特征，完成钼靶图识别的钼靶图识别模型、用于构建CNN和LSTM结构获取B超序列特征，完成B超视频序列识别的B超视频序列识别模型、用于构建3D‑CNN获取MRI序列特征，完成MRI序列识别的MRI序列识别模型和用于将钼靶图识别结果、B超视频序列识别结果和MRI序列识别结果通过乘法进行决策融合，获取最终识别结果的多模态决策融合单元；本发明针对钼靶、B超和MRI图像的特性设计不同的结构进行训练，克服将三者特性完全不一致的图像进行结合的难点，将多维度识别结果通过乘法进行决策融合，获取更加全面和有效的特征，提高识别准确度。