一种针对复杂查询的分组入数据集市方法

基本信息

申请号 CN201911354878.4 申请日 -
公开(公告)号 CN111209321A 公开(公告)日 2020-05-29
申请公布号 CN111209321A 申请公布日 2020-05-29
分类号 G06F16/25;G06F16/2457 分类 计算;推算;计数;
发明人 不公告发明人 申请(专利权)人 北京永洪商智科技有限公司
代理机构 - 代理人 -
地址 100020 北京市海淀区中关村南大街5号二区683号楼1545室
法律状态 -

摘要

摘要 本发明公开了一种针对复杂查询的分组入数据集市方法,在数据从数据源抽取到数据集市的过程中,对有复杂需求的数据抽取,针对可能会产生复杂的数据源查询的情况,提出了一种分组的加速入集市方法。首先通过对源数据分组列的特征分析判断出否能分组,然后根据分组列的不同值进行拆分,最后将拆分后的数据导入数据集市。为了加速入集市的过程,同时减少内存压力,数据将以“块”的单位进行处理,数据拆分过程和数据导入过程将同步进行。