一种基于Impala组件的批处理方法及系统

基本信息

申请号 CN201810385610.6 申请日 -
公开(公告)号 CN108595156A 公开(公告)日 2018-09-28
申请公布号 CN108595156A 申请公布日 2018-09-28
分类号 G06F8/20;G06F8/35;G06F8/41 分类 计算;推算;计数;
发明人 翁宇哲;林强;陈翔 申请(专利权)人 宁波银行股份有限公司
代理机构 北京集佳知识产权代理有限公司 代理人 宁波银行股份有限公司
地址 315042 浙江省宁波市鄞州区宁东路345号
法律状态 -

摘要

摘要 本申请提供的一种基于Impala组件的批处理方法及系统,用户只需要在预设模板中输入与目标批处理任务相对应的符合Impala组件格式的SQL语句,生成内嵌有所述SQL语句的预设格式文件,运行所述预设格式文件,通过调用所述预设格式文件的运行环境中与所述目标批处理任务相对应的至少一个已封装功能包,调用Impala组件中的应用程序编程接口,将所述SQL语句发送至Impala组件,使所述Impala组件执行所述目标批处理任务。避免了开发人员为了调用Impala组件所进行大量的程序开发,以及每次进行批处理时进行程序编写带来错误,提高了批处理的执行效率。