一种基于深度学习的智能冰箱存取动作识别方法

基本信息

申请号 CN201911089592.8 申请日 -
公开(公告)号 CN111126133A 公开(公告)日 2020-05-08
申请公布号 CN111126133A 申请公布日 2020-05-08
分类号 G06K9/00;G06K9/62 分类 计算;推算;计数;
发明人 白燕;楼燚航;张永祥;陈杰 申请(专利权)人 博云视觉(北京)科技有限公司
代理机构 北京众泽信达知识产权代理事务所(普通合伙) 代理人 博云视觉(北京)科技有限公司
地址 100085 北京市海淀区中关村软件园二期未名视通研发楼303
法律状态 -

摘要

摘要 本发明公开了一种基于深度学习的智能冰箱存取动作识别方法,包括以下步骤:S1、通过摄像头获得视频数据进行输入;S2、采用当前先进的目标检测器对输入的视频按帧切分图像并检测图像中的手部信息;S3、当检测出手部信息位于裁剪区域内时,裁剪手部信息图片并送入食材分类网络进行食材分类,并获得食材分类结果;S4、当检测出手部信息位于跟踪区域内时,将手部信息送入Staple目标跟踪算法,获得手部动作的跟踪轨迹;S5、利用存取状态判断规则对跟踪轨迹内的手部状态进行判断,获得用户的存取状态;S6、将用户的存取状态与食材分类结果相结合并输出存取动作结果;S7、重新初始化,等待进入下一轮动作识别检测。