一种基于余弦相似度算法的作业分配方法

基本信息

申请号 CN201911156352.5 申请日 -
公开(公告)号 CN110908803B 公开(公告)日 2022-07-05
申请公布号 CN110908803B 申请公布日 2022-07-05
分类号 G06F9/50(2006.01)I 分类 计算;推算;计数;
发明人 王国俊;郭涛 申请(专利权)人 神州数码融信软件有限公司
代理机构 北京世誉鑫诚专利代理有限公司 代理人 -
地址 100080北京市海淀区西北旺东路10号院(东区)18号楼3层101-302
法律状态 -

摘要

摘要 本发明公开的基于余弦相似度算法的作业分配方法,涉及计算机技术领域,基于余弦相似算法实现的资源匹配,通过运行时收集所有执行节点的数据(CPU使用率、内存使用率、网络使用率、可用线程数量),在选取执行节点时,分别计算各个执行节点最优运行数据与当前实际运行数据之间的相似度,把作业分配相似度值最大的执行节点执行,能够实现集群中机器性能好的执行节点执行更多作业,新增的执行节点能够立即处理大量作业,从而提高执行节点的利用率。通过多纬度运行数据的计算,当任务派发之后,可以有效降低作业处理过程中出现错误的概率,从而降低重发次数,提高作业执行的效率。