一种基于建模平台模型运行流程调度方法

基本信息

申请号 CN201911083701.5 申请日 -
公开(公告)号 CN110825511A 公开(公告)日 2020-02-21
申请公布号 CN110825511A 申请公布日 2020-02-21
分类号 G06F9/48 分类 计算;推算;计数;
发明人 崔晶晶;贾俊芳 申请(专利权)人 北京集奥聚合科技有限公司
代理机构 北京瑞盛铭杰知识产权代理事务所(普通合伙) 代理人 北京集奥聚合科技有限公司
地址 100142 北京市海淀区西四环北路160号4层一区437
法律状态 -

摘要

摘要 本发明提出了一种基于建模平台模型运行流程调度方法,包括:步骤S1,接收机器学习平台发送来的用于定义DAG的json文件,并将所述json文件传输到DAG调度平台;步骤S2,由DAG调度平台解析所述json文件,转换为结构化数据存储到Mysql数据库中;步骤S3,DAG调度平台调用所述json文件,开始调度dag定义各个算子任务,在根据各个算子任务的算子类型,将所述算子任务分发道相应的环境进行执行。本发明可以降低业务代码和调度代码的耦合性;支持分布式任务调度,解决了复杂调度下单机性能瓶颈;DAG因能反映任务间的依赖及时序关系,在任务选择阶段准确赋予任务优先级,而有效的提高了调度的性能。