一种带有虚拟形象生成、显示和控制功能的人机交互设备
基本信息
申请号 | CN202111109333.4 | 申请日 | - |
公开(公告)号 | CN113760100A | 公开(公告)日 | 2021-12-07 |
申请公布号 | CN113760100A | 申请公布日 | 2021-12-07 |
分类号 | G06F3/01(2006.01)I;G06F3/14(2006.01)I;G06T19/00(2011.01)I;G06N3/04(2006.01)I;G06N3/08(2006.01)I;G06N20/00(2019.01)I | 分类 | 计算;推算;计数; |
发明人 | 洪倍 | 申请(专利权)人 | 入微智能科技(南京)有限公司 |
代理机构 | 上海中外企专利代理事务所(特殊普通合伙) | 代理人 | 孙益青 |
地址 | 210012江苏省南京市雨花台区宁双路19号云密城5幢12层1202-029 | ||
法律状态 | - |
摘要
摘要 | 本发明涉及一种带有虚拟形象生成、显示和控制功能的人机交互设备,包括:视频摄像头,提取人脸、骨架、手势、人体运动,进而提取人脸朝向、表情和唇部的动作;立体声收音麦克风,从语音音频中提取人类语音和音源方向,并且通过语音音频结合视频图像中的唇部动作来判断语音音源;虚拟形象显示屏,用于显示图像;CPU,控制各技术特征协调工作;GPU,为显示信息进行转换驱动,控制显示器的正确显示;系统软件,包括操作系统、情绪特征数据库、内容和素材、AR和影音处理引擎;内存和存储器,用于存储数据;以及虚拟形象控制器,生成虚拟形象,并且形成调整策略,记录到内存和存储器中。虚拟形象控制器,排除环境中的旁观者,判断是否有多个操作者。 |
