一种基于yarn的cgroup内存控制优化方法及系统

基本信息

申请号 CN201711493850.X 申请日 -
公开(公告)号 CN108121605B 公开(公告)日 2021-11-16
申请公布号 CN108121605B 申请公布日 2021-11-16
分类号 G06F9/50(2006.01)I 分类 计算;推算;计数;
发明人 叶铿;董喆 申请(专利权)人 武汉烽火云创软件技术有限公司
代理机构 武汉蓝宝石专利代理事务所(特殊普通合伙) 代理人 吴阳
地址 430000 湖北省武汉市洪山区邮科院路88号
法律状态 -

摘要

摘要 一种基于yarn的cgroup内存控制优化方法,其包括如下步骤:S1、在每个管理节点NM启动时对容器container所在的控制组cgroup内存控制目录的父目录设置一个跟计算节点相关的内存hardlimit;S2、开启event_control功能用以打开面向对象方法oom事件监听功能,开启use_hierarchy;S3、开启oom_kill_disable功能用于关闭oom kill功能,并将oom kill功能交给NM启动的另外一个独立的线程Container Monitor进行处理;S4、将在用户提交应用程序app时设置的硬件限制hardlimit修改为cgroup中container所在目录的softlimit。