一种用于大数据清洗的异常检测和消除的方法

基本信息

申请号 CN201911293009.5 申请日 -
公开(公告)号 CN111010393A 公开(公告)日 2020-04-14
申请公布号 CN111010393A 申请公布日 2020-04-14
分类号 H04L29/06(2006.01)I;H04L12/24(2006.01)I 分类 电通信技术;
发明人 文晓飞;刘缨缨 申请(专利权)人 陕西数图行信息科技有限公司
代理机构 北京冠和权律师事务所 代理人 张楠楠
地址 710000陕西省西安市雁塔区青龙东路青龙寺公园西侧1号
法律状态 -

摘要

摘要 本发明提供了一种用于大数据清洗的异常检测和消除的方法,该用于大数据清洗的异常检测和消除的方法基于大数据分析的模式确定数据异常状态检测模型,并根据该数据异常状态检测模型对信息数据中的异常部分进行标定处理和消除处理,以实现对该异常部分的纠正,这样能够提高对海量信息数据进行异常检测和消除处理的效率,并且还能够避免发生异常检测和消除错误情况,此外,该方法还对该信息数据进行关于不同数据区间的修正处理,从而保证被消除异常后的信息数据仍然能够保持数据文本的完整性和数据文本的逻辑正确性,以确保后续对信息数据进行分析处理的便捷性和有效性。