hadoop集群YARN作业资源不足排查实战
hadoop集群YARN作业资源不足排查实战 #### 1.现象 目前 CC 集群出现大量任务积压,运行缓慢的情况,怀疑是集群的资源分配出现了问题。 CC 集群总共有 569 个 NodeManager,总共 VCore 数是 27704 ,内存171T,资源比较丰富。理论上,应该足够任务的执行。 经过现场的分析,发现如下现象。 **集群总体的资源使用高,少量剩余**...
hadoop集群YARN作业资源不足排查实战 #### 1.现象 目前 CC 集群出现大量任务积压,运行缓慢的情况,怀疑是集群的资源分配出现了问题。 CC 集群总共有 569 个 NodeManager,总共 VCore 数是 27704 ,内存171T,资源比较丰富。理论上,应该足够任务的执行。 经过现场的分析,发现如下现象。 **集群总体的资源使用高,少量剩余**...