一种AR设备的手势3D关键点检测方法、电子设备

基本信息

申请号 CN202111218181.1 申请日 -
公开(公告)号 CN114066814A 公开(公告)日 2022-02-18
申请公布号 CN114066814A 申请公布日 2022-02-18
分类号 G06T7/00(2017.01)I;G06T3/00(2006.01)I;G06K9/62(2022.01)I;G06V10/80(2022.01)I;G06V10/46(2022.01)I;G06F17/15(2006.01)I;G06F3/01(2006.01)I 分类 计算;推算;计数;
发明人 朱铭德;丛林 申请(专利权)人 杭州易现先进科技有限公司
代理机构 杭州创智卓英知识产权代理事务所(普通合伙) 代理人 张超
地址 311200浙江省杭州市萧山区钱江世纪公园C区6幢102室
法律状态 -

摘要

摘要 本申请涉及一种AR设备的手势3D关键点检测方法,该方法包括:通过双目相机获取第一图像和第二图像,通过检测网络或前帧图像获取第一图像的粗糙3D关键点,进一步的,再通过优化网络再得到更加精确的优化2D关键点信息,并根据该优化2D关键点计算单目3D关键点。将单目3D关键点投影到第二图像上,并通过优化网络获取第二图像的相对深度信息和2D关键点坐标,最后,融合第一图像和第二图像的2D关键点坐标计算双目手势3D关键点和手掌尺寸。通过本方法,解决了相关技术中手势3D关键点预测结果精度较差的问题,同时兼顾了精度和效率。