基于深度学习的船舶驾驶员疲劳检测方法和系统

基本信息

申请号 CN202110373262.2 申请日 -
公开(公告)号 CN113158850A 公开(公告)日 2021-07-23
申请公布号 CN113158850A 申请公布日 2021-07-23
分类号 G06K9/00;G06K9/62;G06N3/04;G06N3/00 分类 计算;推算;计数;
发明人 尹勇;王鹏 申请(专利权)人 大连海大智龙科技有限公司
代理机构 大连至诚专利代理事务所(特殊普通合伙) 代理人 杜广虎;张海燕
地址 116000 辽宁省大连市甘井子区凌水街道凌海路1号
法律状态 -

摘要

摘要 本发明公开了一种基于深度学习的船舶驾驶员疲劳检测方法和系统。疲劳检测方法包括以下步骤:获取当前视频帧图像;通过改进的Retinaface人脸检测网络进行人脸检测,同时标注左眼、右眼、鼻尖、左嘴角和右嘴角5个人脸关键点;根据5个人脸关键点的位置自适应地裁剪眼睛、嘴巴图片,通过改进的ShuffleNet v2卷积神经网络识别眼睛、嘴巴的开闭状态;计算眼睛和嘴巴的PERCLOS参数;通过随机森林模型,融合眼睛、嘴巴PERCLOS参数综合判断驾驶员是否疲劳。本发明能够快速实现人脸检测和关键点定位,无需手工提取图片信息,可以自动识别眼睛、嘴巴的开闭状态,基于多特征融合的思想,融合眼睛、嘴巴特征参数,从而快速、准确地检测出船舶驾驶员的疲劳状态。