一种图指标流批一体化处理方法及装置
基本信息
申请号 | CN202110365349.5 | 申请日 | - |
公开(公告)号 | CN112732727A | 公开(公告)日 | 2021-06-18 |
申请公布号 | CN112732727A | 申请公布日 | 2021-06-18 |
分类号 | G06F16/22;G06F16/901;G06F16/174;G06F16/182 | 分类 | 计算;推算;计数; |
发明人 | 顾凌云;郭志攀;王伟;张晓丰 | 申请(专利权)人 | 南京冰鉴信息科技有限公司 |
代理机构 | 成都顶峰专利事务所(普通合伙) | 代理人 | 李崧岩 |
地址 | 210000 江苏省南京市鼓楼区中山北路99号11层 | ||
法律状态 | - |
摘要
摘要 | 本申请的一种图指标流批一体化处理方法及装置,根据全图数据得到边表和点表并存储到Hive数据库中,将边表和点表输入到计算模型生成第一连通图表,将边表、点表以及第一连通图表输入到预设程序中得到图数据库底层文件,调用图指标的计算模型以及参数列表的参数组合,在图数据库底层文件中查找与参数组合匹配的目标数据,根据计算模型对目标数据进行图指标计算得到图指标计算结果,通过调用HBase的api将图指标计算结果存入Hbase。将全图数据进行拆分得到不同连通图的数据分别精确的生成了不同的图数据库底层文件,在指标计算时不必跨网络拉取数据,性能更高,能够将计算结果进行精确存储。 |
