一种针对复杂查询的分组入数据集市方法
基本信息
申请号 | CN201911354878.4 | 申请日 | - |
公开(公告)号 | CN111209321A | 公开(公告)日 | 2020-05-29 |
申请公布号 | CN111209321A | 申请公布日 | 2020-05-29 |
分类号 | G06F16/25;G06F16/2457 | 分类 | 计算;推算;计数; |
发明人 | 不公告发明人 | 申请(专利权)人 | 北京永洪商智科技有限公司 |
代理机构 | - | 代理人 | - |
地址 | 100020 北京市海淀区中关村南大街5号二区683号楼1545室 | ||
法律状态 | - |
摘要
摘要 | 本发明公开了一种针对复杂查询的分组入数据集市方法,在数据从数据源抽取到数据集市的过程中,对有复杂需求的数据抽取,针对可能会产生复杂的数据源查询的情况,提出了一种分组的加速入集市方法。首先通过对源数据分组列的特征分析判断出否能分组,然后根据分组列的不同值进行拆分,最后将拆分后的数据导入数据集市。为了加速入集市的过程,同时减少内存压力,数据将以“块”的单位进行处理,数据拆分过程和数据导入过程将同步进行。 |
