敏感词的检测方法
基本信息
申请号 | CN201910991407.8 | 申请日 | - |
公开(公告)号 | CN110727766A | 公开(公告)日 | 2020-01-24 |
申请公布号 | CN110727766A | 申请公布日 | 2020-01-24 |
分类号 | G06F16/33;G06F16/35;G06F16/9535;G06F40/30;G06K9/62 | 分类 | 计算;推算;计数; |
发明人 | 徐钟豪;孟雷;谢忱 | 申请(专利权)人 | 上海斗象信息科技有限公司 |
代理机构 | 上海翰信知识产权代理事务所(普通合伙) | 代理人 | 上海斗象信息科技有限公司 |
地址 | 201203 上海市浦东新区碧波路690号7号楼7层(2号线张江高科地铁站5号口出) | ||
法律状态 | - |
摘要
摘要 | 本发明涉及一种敏感词的检测方法,包括以下步骤:建立敏感词数据库,分为强敏感词数据库和弱敏感词数据库;建立训练模型,训练模型包括预判模型和弱敏感词的检测模型;进行检测,载入训练模型的系统定时爬取待检测网页内容,预判模型判断待检测文本中的词语是否属于敏感词数据库中,并判断其敏感类型;若待检测文本中的词语为强敏感词数据库中的强敏感词,则直接反馈待检测文本所属的强敏感词数据库的类型;若待检测文本中的词语为弱敏感词数据库中的弱敏感词,则将待检测文本输入弱敏感词的检测模型进行检测,由弱敏感词的检测模型判断其敏感可疑度分值并反馈。本发明通过设置预判和检测模型进行判断和检测,提高了敏感词检测的准确性和灵活性。 |
