提高在线服务质量和集群资源利用率的混合调度系统

基本信息

申请号 CN201811366342.X 申请日 -
公开(公告)号 CN109347974B 公开(公告)日 2019-02-15
申请公布号 CN109347974B 申请公布日 2019-02-15
分类号 H04L29/08(2006.01)I 分类 电通信技术;
发明人 胡春明;肖俊青;朱建勇;邵凯阳;屈曦明 申请(专利权)人 神州数码(中国)有限公司
代理机构 北京中创阳光知识产权代理有限责任公司 代理人 北京航空航天大学
地址 100191北京市海淀区学院路37号
法律状态 -

摘要

摘要 本发明提出一种提高在线服务质量和集群资源利用率的在线离线混合调度系统,包括信息采集模块,在线AM模块,离线AM模块,客户端模块,调度器模块;所述信息采集模块收集系统中各在线服务之间的调用关系,并存储到Redis中;当用户提交在线应用时,所述在线AM模块解析每个组件的依赖关系,并将所述组件按照所述依赖关系依次部署在集群中;当用户提交离线作业时,所述离线AM模块向RM申请资源,并将离线作业调度到集群中运行;所述客户端模块解析处理用户提交的作业,将所述作业转化为对应的请求向RM申请资源,并负责拉起所述在线AM模块向客户展示应用运行情况;所述调度器模块位于RM中,所述调度器模块会定时根据所述在线AM模块汇报的各容器关键度计算各服务器节点的关键度,并在调度离线作业时根据所述计算出的服务器关键度进行调度。