一种分析非结构化数据的方法及系统

基本信息

申请号 CN202110233220.9 申请日 -
公开(公告)号 CN113010629A 公开(公告)日 2021-06-22
申请公布号 CN113010629A 申请公布日 2021-06-22
分类号 G06F16/31;G06F16/332 分类 计算;推算;计数;
发明人 崔文正;王拓;和树伟;陆林锋 申请(专利权)人 上海七牛信息技术有限公司
代理机构 上海硕力知识产权代理事务所(普通合伙) 代理人 郭桂峰
地址 201203 上海市浦东新区中国(上海)自由贸易试验区博霞路66号1-5层
法律状态 -

摘要

摘要 本发明公开一种分析非结构化数据的方法和系统,该方法包括:读入目标数据源,解析目标数据源数据获得提取字段列表;生成搜索规则和搜索表达式,将搜索规则添加到历史字段规则映射库用以后续学习;根据目标数据源确定解析后的结构化数据的表结构,保存所述表结构;基于所述搜索规则和搜索表达式从目标数据源中解析获得字段信息,按照所述表结构保存获得的字段信息,得到结构化数据。本发明所述方法和系统,明显降低了对非结构化数据的处理成本,减少了信息损失,提高了对数据的分析提取效率,因此具有明显的技术优势和有益效果。