一种基于样本生成和模态融合的跨域无线动作识别方法
基本信息
| 申请号 | CN202111456132.1 | 申请日 | - |
| 公开（公告）号 | CN114444534A | 公开（公告）日 | 2022-05-06 |
| 申请公布号 | CN114444534A | 申请公布日 | 2022-05-06 |
| 分类号 | G06K9/00（2022.01）I;G06N3/04（2006.01）I;G06N3/08（2006.01）I | 分类 | 计算；推算；计数; |
| 发明人 | 周保;周瑞;罗悦;程宇;林建旋;胡思林;方剑平;王佳昊 | 申请（专利权）人 | 厦门智小金智能科技有限公司 |
| 代理机构 | 电子科技大学专利中心 | 代理人 | 邹裕蓉 |
| 地址 | 611731四川省成都市高新区（西区）西源大道2006号 | ||
| 法律状态 | - | ||
摘要
| 摘要 | 本发明提供了一种基于样本生成和模态融合的跨域无线动作识别方法，为了以少量数据实现高精度跨域动作识别，将源域和目标域的同动作类别数据进行线性变换得到包含源域和目标域环境信息的新数据，然后利用生成编码器和生成解码器去除源域的环境信息并增强目标域的环境信息，通过不断训练，生成大量目标域的虚拟幅值数据和虚拟相位数据。为了进一步提升跨域动作识别精度，对虚拟幅值和虚拟相位进行特征融合。通过融合编码器从幅值和相位中提取出动作特征，并通过相似度损失使不同模态的动作特征一致，然后利用融合解码器增强动作特征提取能力。最后对不同模态的动作特征进行通道拼接，采用动作分类器对拼接的动作特征进行分类，得到动作识别结果。 |
