一种基于多模态多源的深度数据精炼方法及系统

基本信息

申请号 CN202010513739.8 申请日 -
公开(公告)号 CN111667523A 公开(公告)日 2020-09-15
申请公布号 CN111667523A 申请公布日 2020-09-15
分类号 G06T7/55(2017.01)I 分类 计算;推算;计数;
发明人 蒲灿;杨传宇 申请(专利权)人 深圳阿米嘎嘎科技有限公司
代理机构 北京酷爱智慧知识产权代理有限公司 代理人 深圳阿米嘎嘎科技有限公司
地址 518102广东省深圳市宝安区西乡街道共乐社区银田工业区西发小区鼎盛大厦A座601b-5
法律状态 -

摘要

摘要 本发明属于传感器深度感知和计算机三维视觉技术领域,具体涉及一种基于多模态多源的深度数据精炼方法及系统,所述方法包括以下步骤:通过RGB摄像头获取场景颜色信息,对场景颜色信息进行分析得到语义颜色信息;通过多个深度传感器获取同一时刻同一场景的多源三维点云信息,并将多源三维点云信息转换为二维深度信息;将语义颜色信息和二维深度信息进行结合,得到多源三模态的语义颜色深度信息;将语义颜色深度信息输入深度精炼神经网络预测模型,得到高精度二维深度信息和对应的置信度信息。本发明可以得到高精度深度数据和对应的置信度,具有较强鲁棒性,且相比于传统方法,开发难度较低,对不同深度传感器的深度数据融合,具有应用上的普适性。