ITPub博客

首页 > 数据库 > 数据库开发技术 > openGauss学习笔记-234 openGauss性能调优-系统调优-资源负载管理-资源管理准备-设置控制组

openGauss学习笔记-234 openGauss性能调优-系统调优-资源负载管理-资源管理准备-设置控制组

原创 数据库开发技术 作者:shuchaoyang 时间:2023-12-11 07:00:00 0 删除 编辑

openGauss学习笔记-234 openGauss性能调优-系统调优-资源负载管理-资源管理准备-设置控制组234.1 背景信息234.2 前提条件234.3 操作步骤234.3.1 创建子Class控制组和Workload控制组234.3.2 更新控制组的资源配额234.3.3 删除控制组234.4 查看控制组的信息

openGauss学习笔记-234 openGauss性能调优-系统调优-资源负载管理-资源管理准备-设置控制组

234.1 背景信息

openGauss资源负载管理的核心是资源池,而配置资源池首先要在环境中实现控制组Cgroups的设置。更多Cgroups的原理介绍,请查看相关操作系统的产品手册。openGauss的控制组请参考查看控制组的信息。

Class控制组为数据库业务运行所在的顶层控制组,集群部署时会自动生成默认子Class控制组“DefaultClass”。DefaultClass的Medium控制组会含有系统触发的作业在运行,该控制组不允许进行资源修改,且运行在该控制组上的作业不受资源管理的控制,所以推荐创建新的子Class及其Workload控制组来设置资源比例。

234.2 前提条件

已熟悉《工具与命令参考》中“服务端工具 > gs_cgroup”章节和“服务端工具 > gs_ssh”章节的使用。

234.3 操作步骤

说明:

  • 在openGauss中,需要在每个集群节点上执行控制组的创建、更新、删除操作,才能实现对整个集群资源的控制,所以下述步骤中都使用《工具与命令参考》中“服务端工具 > gs_ssh”命令执行。

  • 控制组的命名要求如下:

  • 无论是子Class控制组还是Workload控制组,都不允许在名称中包含字符“:”。

  • 不可以创建同名的控制组。

234.3.1 创建子Class控制组和Workload控制组

  1. 以操作系统用户omm登录openGauss主节点。

  2. 创建名称为“class_a”和“class_b”的子Class控制组,CPU资源配额分别为Class的40%和20%。

    gs_ssh -c "gs_cgroup -c -S class_a -s 40"
    gs_ssh -c "gs_cgroup -c -S class_b -s 20"
  3. 创建子Class控制组“class_a”下名称为“workload_a1”和“workload_a2”的Workload控制组,CPU资源配额分别为“class_a”控制组的20%和60%。

    gs_ssh -c "gs_cgroup -c -S class_a -G workload_a1 -g 20 "
    gs_ssh -c "gs_cgroup -c -S class_a -G workload_a2 -g 60 "
  4. 创建子Class控制组“class_b”下名称为“workload_b1”和“workload_b2”的Workload控制组,CPU资源配额分别为“class_b”控制组的50%和40%。

    gs_ssh -c "gs_cgroup -c -S class_b -G workload_b1 -g 50 "
    gs_ssh -c "gs_cgroup -c -S class_b -G workload_b2 -g 40 "

234.3.2 更新控制组的资源配额

  1. 更新“class_a”控制组的CPU资源配额为30%。

    gs_ssh -c "gs_cgroup -u -S class_a -s 30"
  2. 更新“class_a”下的“workload_a1”的CPU资源配额为“class_a”的30%。

    gs_ssh -c "gs_cgroup -u -S class_a -G workload_a1 -g 30"

    须知: 调整后的Workload控制组“workload_a1”占有的CPU资源不应大于其对应的子Class控制组“class_a”。并且,此名称不能是Timeshare Cgroup的默认名称,如“Low”、“Medium”、“High”或“Rush”。

234.3.3 删除控制组

  1. 删除控制组“class_a”。

    gs_ssh -c "gs_cgroup -d  -S class_a"

    以上操作可以删除控制组“class_a”。

    须知: root用户或者具有root访问权限的用户指定“-d” 和“-U username”删除普通用户“username”可访问的默认Cgroups。普通用户指定“-d”和“-S classname”可以删除已有的Class Cgroups。

234.4 查看控制组的信息

  1. 查看配置文件中控制组信息。

    gs_cgroup -p 

    控制组配置信息

    gs_cgroup -p

    Top Group information is listed:
    GID:   0 Type: Top   Percent(%): 1000( 50) Name: Root                 Cores: 0-47
    GID:   1 Type: Top   Percent(%): 833( 83) Name: Gaussdb:omm           Cores: 0-20
    GID:   2 Type: Top   Percent(%): 333( 40) Name: Backend               Cores: 0-20
    GID:   3 Type: Top   Percent(%): 499( 60) Name: Class                 Cores: 0-20

    Backend Group information is listed:
    GID:   4 Type: BAKWD Name: DefaultBackend   TopGID:   2 Percent(%): 266(80) Cores: 0-20
    GID:   5 Type: BAKWD Name: Vacuum           TopGID:   2 Percent(%): 66(20) Cores: 0-20

    Class Group information is listed:
    GID: 20 Type: CLASS Name: DefaultClass     TopGID:   3 Percent(%): 166(20) MaxLevel: 1 RemPCT: 100 Cores: 0-20
    GID: 21 Type: CLASS Name: class1           TopGID:   3 Percent(%): 332(40) MaxLevel: 2 RemPCT: 70 Cores: 0-20

    Workload Group information is listed:
    GID: 86 Type: DEFWD Name: grp1:2           ClsGID: 21 Percent(%): 99(30) WDLevel: 2 Quota(%): 30 Cores: 0-5

    Timeshare Group information is listed:
    GID: 724 Type: TSWD   Name: Low             Rate: 1
    GID: 725 Type: TSWD   Name: Medium           Rate: 2
    GID: 726 Type: TSWD   Name: High             Rate: 4
    GID: 727 Type: TSWD   Name: Rush             Rate: 8

    Group Exception information is listed:
    GID: 20 Type: EXCEPTION Class: DefaultClass
    PENALTY: QualificationTime=1800 CPUSkewPercent=30

    GID: 21 Type: EXCEPTION Class: class1
    PENALTY: AllCpuTime=100 QualificationTime=2400 CPUSkewPercent=90

    GID: 86 Type: EXCEPTION Group: class1:grp1:2
    ABORT: BlockTime=1200 ElapsedTime=2400

    上述示例查看到的控制组配置信息如表1所示。

    表 1 控制组配置信息

  2. 查看操作系统中树形结构的控制组信息。

    执行如下命令可以查询控制组树形结构信息。

    gs_cgroup -P

    返回信息如下,其中shares代表操作系统中CPU资源的动态资源配额“cpu.shares”的数值,cpus代表操作系统中CPUSET资源的动态资源限额“cpuset.cpus”的数值,指的是该控制组能够使用的核数范围。

    Mount Information:
    cpu:/dev/cgroup/cpu
    blkio:/dev/cgroup/blkio
    cpuset:/dev/cgroup/cpuset
    cpuacct:/dev/cgroup/cpuacct

    Group Tree Information:
    - Gaussdb:wangrui (shares: 5120, cpus: 0-20, weight: 1000)
          - Backend (shares: 4096, cpus: 0-20, weight: 400)
                  - Vacuum (shares: 2048, cpus: 0-20, weight: 200)
                  - DefaultBackend (shares: 8192, cpus: 0-20, weight: 800)
          - Class (shares: 6144, cpus: 0-20, weight: 600)
                  - class1 (shares: 4096, cpus: 0-20, weight: 400)
                          - RemainWD:1 (shares: 1000, cpus: 0-20, weight: 100)
                                  - RemainWD:2 (shares: 7000, cpus: 0-20, weight: 700)
                                          - Timeshare (shares: 1024, cpus: 0-20, weight: 500)
                                                  - Rush (shares: 8192, cpus: 0-20, weight: 800)
                                                  - High (shares: 4096, cpus: 0-20, weight: 400)
                                                  - Medium (shares: 2048, cpus: 0-20, weight: 200)
                                                  - Low (shares: 1024, cpus: 0-20, weight: 100)
                                  - grp1:2 (shares: 3000, cpus: 0-5, weight: 300)
                          - TopWD:1 (shares: 9000, cpus: 0-20, weight: 900)
                  - DefaultClass (shares: 2048, cpus: 0-20, weight: 200)
                          - RemainWD:1 (shares: 1000, cpus: 0-20, weight: 100)
                                  - Timeshare (shares: 1024, cpus: 0-20, weight: 500)
                                          - Rush (shares: 8192, cpus: 0-20, weight: 800)
                                          - High (shares: 4096, cpus: 0-20, weight: 400)
                                          - Medium (shares: 2048, cpus: 0-20, weight: 200)
                                          - Low (shares: 1024, cpus: 0-20, weight: 100)
                          - TopWD:1 (shares: 9000, cpus: 0-20, weight: 900)
  3. 通过系统视图获取控制组配置信息。

    a.使用gsql访问openGauss数据库。

    b.获取系统中所有控制组的配置信息。

    openGauss=# SELECT * FROM gs_all_control_group_info;


👍 点赞,你的认可是我创作的动力!

⭐️ 收藏,你的青睐是我努力的方向!

✏️ 评论,你的意见是我进步的财富!


PS:因为公众号平台更改了推送规则,如果不想错过内容,记得读完点一下“在看”,加个“星标”,这样每次新文章推送才会第一时间出现在你的订阅列表里。点“在看”支持我吧!


原文作者:超哥的IT私房菜;如有侵权,请联系管理员删除。

请登录后发表评论 登录
全部评论
专注于IT系统集成、运维、架构二十年的IT职场老兵,拥有CCNA、OCA、OCP、PGCA、PGCE认证证书,公众号:超哥的IT私房菜,知识星球:超哥的IT私房菜,目前是多家IT厂商的咨询顾问。

注册时间:2021-08-27

  • 博文量
    552
  • 访问量
    303601