多源异构SQL查询引擎的构建方法及装置

基本信息

申请号 CN202011044877.2 申请日 -
公开(公告)号 CN112579626A 公开(公告)日 2021-03-30
申请公布号 CN112579626A 申请公布日 2021-03-30
分类号 G06F16/242(2019.01)I;G06F8/30(2018.01)I 分类 计算;推算;计数;
发明人 王济平;黎刚;汤克云;周健雄;高俊杰 申请(专利权)人 京信数据科技有限公司
代理机构 深圳余梅专利代理事务所(特殊普通合伙) 代理人 陈余才
地址 528400广东省中山市东区中山五路57号7层
法律状态 -

摘要

摘要 本发明涉及多源异构SQL查询引擎的构建方法及装置。查询引擎的构建方法包括以下步骤:步骤S1,解析数据源的元数据并内存加载;步骤S2,对数据源对应的SQL语法进行转换、封装,得到有向无环图类SqlNode,根据元数据进行校验SqlNode;步骤S3,对SqlNode进行裁剪得到摘要程序Extract,并取SqlNode根节点构成要执行的Sql语法,随后选择对应计算引擎;步骤S4,基于摘要程序Extract生成计算引擎规则所需要的java代码加载至内存容器中;步骤S5,上一步生成的java代码遍历优化并转换成类代码,执行类代码并进行数据封装,得到数据结果加载至内存中。本发明实现了多源异构数据的关联查询分析,可以满足大数据场景各种数据源的快速接入查询分析需求。