一种基于激光视觉融合和深度学习的防撞方法、系统

基本信息

申请号 CN202110054308.4 申请日 -
公开(公告)号 CN113173502A 公开(公告)日 2021-07-27
申请公布号 CN113173502A 申请公布日 2021-07-27
分类号 B66C13/16;B66C13/46;B66C15/04;G06K9/62;G06K9/34;G06T7/00;G06T7/33;G06T7/70;G06T7/80 分类 卷扬;提升;牵引;
发明人 罗永祥;严志展;陈志辉;刘键涛;魏秋新 申请(专利权)人 福建电子口岸股份有限公司
代理机构 厦门市首创君合专利事务所有限公司 代理人 连耀忠;王婷婷
地址 361000 福建省厦门市软件园二期观日路44号6楼
法律状态 -

摘要

摘要 本发明提供一种基于激光视觉融合和深度学习的防撞方法,包括如下步骤:获取图像信息和3D点云数据;将图像信息和3D点云数据进行配准,利用配准后的图像数据和3D点云数据生成RGBD图像,分为训练集和测试集;采用训练集的RGBD图像对3D目标检测模型进行训练,得到训练好的3D目标检测模型;将测试集的RGBD图像输入训练好的3D目标检测模型,利用目标检测方法,对视野范围内的障碍物进行类别检测并计算物体距离龙门吊最近端的距离;根据计算出的物体类别和距离,确定是否进行减速、停止操作。本发明提供的方法采用视觉手段和激光手段的结合,通过图像信息和激光点云信息融合配准,获得RGBD图像,结合图像的深度信息,实现更精确的防撞检测。