多模态融合人机交互方法、装置、存储介质、终端及系统

基本信息

申请号 CN201910770607.0 申请日 -
公开(公告)号 CN110465947B 公开(公告)日 2021-07-02
申请公布号 CN110465947B 申请公布日 2021-07-02
分类号 B25J9/16 分类 手动工具;轻便机动工具;手动器械的手柄;车间设备;机械手;
发明人 孙骋;苏衍宇;孙斌;张俊杰;莫明兴 申请(专利权)人 苏州博众智能机器人有限公司
代理机构 北京品源专利代理有限公司 代理人 孟金喆
地址 215200 江苏省苏州市吴江经济技术开发区山湖西路558号东运科技园7号标准厂房
法律状态 -

摘要

摘要 本发明实施例公开了多模态融合人机交互方法、装置、存储介质、终端及系统。该方法包括:获取机器人采集的目标交互对象对应的交互数据,其中,交互数据包括音频数据、微表情数据、距离数据以及姿势数据;根据交互数据基于预设规则确定所述机器人的交互反馈数据,其中,交互反馈数据包括包含语气信息的语音反馈数据、微表情反馈数据以及动作反馈数据;利用交互反馈数据控制机器人执行相应的交互反馈操作。本发明实施例通过采用上述技术方案,可以使机器人的反馈更加合理和人性化,丰富反馈形式,有助于提升人机交互的体验。