首页 > 大数据 > Hadoop > Flink - 合理利用 cpu 资源
在 capacity-scheduler.xml 中修改属性:
<property> <name>yarn.scheduler.capacity.resource-calculator</name> <!-- <value>org.apache.hadoop.yarn.util.resource.DefaultResourceCalculator</value> --> <value>org.apache.hadoop.yarn.util.resource.DominantResourceCalculator</value> </property
Yarn 的容量调度器默认情况下是使用“DefaultResourceCalculator”分配策略,只根 据内存调度资源,所以在 Yarn 的资源管理页面上看到每个容器的 vcore 个数还是 1。 可以修改策略为 DominantResourceCalculator,该资源计算器在计算资源的时候会 综合考虑 cpu 和内存的情况。
来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/70024433/viewspace-2996683/ ,如需转载,请注明出处,否则将追究法律责任。