面向负载均衡的龙芯大数据一体机自适应任务分割方法及系统
基本信息
申请号 | CN202010841295.0 | 申请日 | - |
公开(公告)号 | CN112148474A | 公开(公告)日 | 2020-12-29 |
申请公布号 | CN112148474A | 申请公布日 | 2020-12-29 |
分类号 | G06F9/50(2006.01)I;G06F16/2455(2019.01)I | 分类 | 计算;推算;计数; |
发明人 | 陈锋;陈宇强 | 申请(专利权)人 | 安徽中科龙安科技股份有限公司 |
代理机构 | 北京凯特来知识产权代理有限公司 | 代理人 | 郑立明;韩珂 |
地址 | 230088安徽省合肥市蜀山区湖光路1299号17栋 | ||
法律状态 | - |
摘要
摘要 | 本发明公开了一种面向负载均衡的龙芯大数据一体机自适应任务分割方法及系统,该方案通过获取各计算节点CPU数量、性能和负载,将待处理数据进行初始化分割,再将所分割数据包和相应的处理程序分配给各计算节点CPU处理;进一步根据第一次各计算节点处理结果,统计计算节点各CPU对数据包的最长处理时间与最短处理时间的比值,根据该比值对剩余数据包进行划分,依次循环,直至所有的数据包处理完毕,从而实现各CPU的负载均衡和处理任务的时间同步,该方法较好地适应了计算量未知的待处理数据包的自适应任务划分,提高并行效率,适应具有MIPS架构的龙芯大数据一体机的负载均衡和流式大数据实时处理。 |
