首页/ 北京科杰信息技术有限公司/ 专利详情

一种hadoop大数据平台的任务调度管理系统及方法

基本信息

申请号 CN201810856044.2 申请日 -
公开（公告）号 CN110780981A 公开（公告）日 2020-02-11
申请公布号 CN110780981A 申请公布日 2020-02-11
分类号 G06F9/48 分类 计算；推算；计数;
发明人 于洋;李鹏;高经郡;郭振强 申请（专利权）人 北京科杰信息技术有限公司
代理机构 北京智行阳光知识产权代理事务所（普通合伙） 代理人 黄锦阳
地址 100101 北京市朝阳区阜通东大街1号院3号楼3层2单元120307
法律状态 -

摘要

摘要 本发明公开了一种hadoop大数据平台的任务调度管理系统及方法，系统包括权限模块、任务检索模块、任务依赖模块、调度检索模块、任务合规检查模块、调度模块、报警模块和任务状态检索模块；本发明提供一种可视化系统，用于可视化的进行任务的调度依赖管理，以及任务血缘关系的查看和管理，便于用户进行问题的追溯以任务的依赖关系配置；不再需要用户进行手动配置任务的运行时间，调度的任务会根据前置依赖任务的运行结束时间自动开始运行后置任务；当任务发生运行错误时，会根据用户配置的重试次数进行任务的重试运行，并提供报警机制，提醒依赖了当前运行失败的用户；任务依赖的环自动检索功能，有效避免任务运行死循环的问题。