一种从示教视频学习物体的可供性方法

基本信息

申请号 CN202110242514.8 申请日 -
公开(公告)号 CN112949501A 公开(公告)日 2021-06-11
申请公布号 CN112949501A 申请公布日 2021-06-11
分类号 G06K9/00;G06K9/32;G06K9/62;G06N3/04;G06N3/08 分类 计算;推算;计数;
发明人 黄炜;颜天信 申请(专利权)人 安徽省科亿信息科技有限公司
代理机构 合肥律众知识产权代理有限公司 代理人 赵娟
地址 230000 安徽省合肥市黄山路602号国家大学科技园创业孵化中心
法律状态 -

摘要

摘要 本发明公开了一种从示教视频学习物体的可供性方法,该方法包括从示教视频帧中检测手部区域;搭建手部相关选择网络,并进行训练;利用训练好的手部相关选择网络提取上述手部检测数据中人与物体发生交互的关键帧;将关键帧中人和物体交互相关区域迁移到静态物体的图像中,并通过蒸馏损失将静态物体映射到人操作物体的状态;得到可供性标定网络;用挑选出的关键帧训练网络,优化参数,得到训练后的可供性标定网络;将待识别物体的静态物体的图像以及可供性标签输入到网络中,输出物体上能完成该相互作用的区域;本发明具有比较好的泛化能力,对于未见过的物体,能根据物体上某些局部特征学习到相关相互作用的区域。