ITPub博客

首页 > 大数据 > Hadoop > Flink - 合理利用 cpu 资源

Flink - 合理利用 cpu 资源

Hadoop 作者:元亨利贞 时间:2023-11-22 22:16:37 0 删除 编辑

在 capacity-scheduler.xml 中修改属性:

<property>
<name>yarn.scheduler.capacity.resource-calculator</name>
<!-- <value>org.apache.hadoop.yarn.util.resource.DefaultResourceCalculator</value> -->
<value>org.apache.hadoop.yarn.util.resource.DominantResourceCalculator</value>
</property

Yarn 的容量调度器默认情况下是使用“DefaultResourceCalculator”分配策略,只根 据内存调度资源,所以在 Yarn 的资源管理页面上看到每个容器的 vcore 个数还是 1。 可以修改策略为 DominantResourceCalculator,该资源计算器在计算资源的时候会 综合考虑 cpu 和内存的情况。

来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/70024433/viewspace-2996683/ ,如需转载,请注明出处,否则将追究法律责任。

请登录后发表评论 登录
全部评论

注册时间:2022-11-21

  • 博文量
    383
  • 访问量
    247999