一种自适应架构语义分布文本理解方法及系统
基本信息
申请号 | CN202010661152.1 | 申请日 | - |
公开(公告)号 | CN111814468A | 公开(公告)日 | 2020-10-23 |
申请公布号 | CN111814468A | 申请公布日 | 2020-10-23 |
分类号 | G06F40/289(2020.01)I | 分类 | 计算;推算;计数; |
发明人 | 庞文君;杨猛;黄志青 | 申请(专利权)人 | 前海企保科技(深圳)有限公司 |
代理机构 | 深圳市中科创为专利代理有限公司 | 代理人 | 前海企保科技(深圳)有限公司 |
地址 | 518000广东省深圳市前海深港合作区前湾一路1号A栋201室(入驻深圳市前海商务秘书有限公司) | ||
法律状态 | - |
摘要
摘要 | 本发明涉及一种自适应架构语义分布文本理解方法及系统,该自适应架构语义分布文本理解系统包括的主要模块有文本基础编码器、语义关联关键分布表示模块、架构自适应分类网络模块。本发明利用语义关联关键分布表示模块中的上下文多头注意力语义分布表示,可以更好的利用上下文信息,消除上下文表述的歧义问题;同时通过关键信息多头注意力语义分布表示,可以提取关键词、短语等关键信息,解决细分领域关键信息对分类任务敏感的问题。而架构自适应分类网络模块,可根据分类类别的相近程度自适应的选择分类网络层,从而使相近的分类共用权重参数,分类类别相差较大的分类不共用权重,从而能更好的解决分类类别无法完全独立的问题。 |
