一种基于大数据建模的BI应用系统

基本信息

申请号 CN201911360296.7 申请日 -
公开(公告)号 CN111126852A 公开(公告)日 2020-05-08
申请公布号 CN111126852A 申请公布日 2020-05-08
分类号 G06Q10/06;G06F8/20;G06F16/21;G06F16/215;G06F16/2458 分类 计算;推算;计数;
发明人 陆洋 申请(专利权)人 江苏三六五网络股份有限公司
代理机构 南京常青藤知识产权代理有限公司 代理人 仲晖
地址 210000 江苏省南京市新城科技园云龙山路99号省建大厦B座16楼
法律状态 -

摘要

摘要 本发明提供一种基于大数据建模的BI应用系统,包括:数据采集存储模块,DPI、业务侧、网元侧数据通过文件接口方式发送到Flume‑NG集群,将接收到的数据实时的通过hdfs方式汇聚到大数据分析平台;数据清洗模块,通过编写HQL脚本对数据进行清洗、转换,形成特征宽表;数据挖掘模块,基于特征宽表的数据建模进行模型开发、模型评估和模型应用;分析结果发布,模型应用的结果集存储在HBase中,数据的调用通过HBase API实现,数据的展现通过ECharts技术实现。本发明统一进行数据建模,建设集中的数据处理中心,提供强大的数据处理能力,保障系统的稳定运行,构建统一的BI应用中心,满足业务需求,体现数据价值。