一种基于聚类分析的数据血缘智能溯源的方法及装置

基本信息

申请号 CN201910337129.4 申请日 -
公开(公告)号 CN110083639A 公开(公告)日 2019-08-02
申请公布号 CN110083639A 申请公布日 2019-08-02
分类号 G06F16/2458(2019.01)I; G06F16/22(2019.01)I; G06F16/28(2019.01)I 分类 计算;推算;计数;
发明人 王鹏; 陈昊; 于会游; 姜玉峰; 滕姿; 李栋; 杜浩; 饶定远; 唐丽娜; 靳翼; 闵圣捷; 陈丽婷; 童昊; 许亚洋 申请(专利权)人 中电科嘉兴新型智慧城市科技发展有限公司
代理机构 上海伯瑞杰知识产权代理有限公司 代理人 孟旭彤
地址 314006 浙江省嘉兴市南湖区亚太路705号创新大厦B段22F
法律状态 -

摘要

摘要 一种基于聚类分析的数据血缘智能溯源的方法,包括步骤:步骤1,读取表结构及数据,通过数据工程手段形成各字段数据特征;步骤2,以字段为单位,字段数据特征集为特征,采用机器学习中的聚类分析算法对数据样本进行学习;步骤3,重复执行步骤2中的聚类分析,直到找到最佳分类数以及最佳分类;步骤4,在最佳分类下,同分类中的数据字段将自动判别为可能具有血缘关系的字段;步骤5,对每一个血缘关系,根据该关系所指向的表创建时间的先后顺序,推断该血缘关系的方向,即推断哪个字段是源,哪个字段是目标,若该血缘关系的字段来自同一张表,则标记血缘关系为无效血缘关系;步骤6,根据有效的字段血缘关系计算表血缘关系。