ITPub博客

首页 > 数据库 > 国内数据库 > GBase 8c分布式数据库日志体系简析(下)

GBase 8c分布式数据库日志体系简析(下)

原创 国内数据库 作者:GBASE南大通用 时间:2026-11-16 14:17:11 0 删除 编辑

在南大通用GBase 8c分布式数据库(gbase database)运维工作中,日志是定位故障、分析性能问题、追溯操作行为最重要的依据。绝大多数数据库报错、锁等待、性能劣化,都可以从日志中找到线索。运维工作中,养成优先查阅日志的习惯,能够快速区分是业务 SQL、操作系统还是数据库内核层面的问题,减少盲目试错。熟练用好系统、操作、Trace、审计、WAL、性能、黑匣子这七类日志,学会先分析日志、再动手处置,也是做好 GBase 8c 稳定运维的基本功。

日志分类

GBase 8c 主要分为系统日志、操作日志、Trace 日志、审计日志、WAL 预写日志、性能日志、黑匣子日志,不同日志存放路径与适用场景各不相同。

系统日志 :集群、节点安装部署以及数据库运行期间,记录数据库进程、CM 集群管理组件 cm_server、cm_agent、om_monitor 的运行日志。数据库节点日志可存放在
/var/log/gbase/gbase/pg_log,OM 安装卸载日志存放在 /var/log/gbase/gbase/om。日志会按时间、大小等配置自动切割,默认情况下,每日 0 点或者日志文件大于 16MB 或者数据库实例(数据库节点)重新启动后,会生成新的日志文件。集群启动失败、进程异常退出、网络报错,优先查阅系统日志。

操作日志:记录通过客户端工具(如 gs_guc)操作数据库时产生的日志,存放在 $GAUSSLOG/bin 目录(环境变量 $GAUSSLOG 默认为/var/log/gbase/gbase)。当参数修改、集群启停操作出现异常,可以通过操作日志回溯执行命令、报错详情,跟踪用户对数据库进行了哪些操作,重现故障场景,适合复盘运维变更引发的问题。

Trace 日志:通过 gstrace 工具指定启动 trace 功能的 DN 实例后,会记录大量 Trace 日志,可用于分析数据库的异常信息。

审计日志:记录用户登录、权限变更、DDL/DML 等审计事件。开启审计后会产生大量日志,会持续消耗磁盘空间,需要结合磁盘容量规划维护策略,定期清理。多用于安全合规、追溯误操作场景。

WAL 日志,是数据库数据恢复的核心,记录所有数据变更。数据库宕机、实例重建、PITR 时间点恢复都依赖 WAL 日志。WAL 日志的内容取决于记录事务的类型,在系统崩溃时可以利用 WAL 日志进行恢复。默认配置下,GBase 8c 每次启动时会先读取 WAL 日志进行恢复。生产环境务必要做好 WAL 归档备份,避免日志被自动回收导致故障后无法恢复数据。

性能日志:数据库系统运行时检测物理资源运行状态的日志,主要关注外部资源的访问性能,包括磁盘等外部资源的访问检测信息。生成“.prf”后缀性能剖析文件,数据库节点的性能日志目录在 $GAUSSLOG/gs_profile 中各自对应的目录下。默认情况下每日 0 点、文件大于 20MB 或实例重启后生成新文件,适合定位业务高峰期外部资源访问类瓶颈。

黑匣子日志:数据库系统崩溃的时候,通过故障现场堆、栈信息可以分析出故障发生时的进程上下文,方便故障定位。黑匣子具有在系统崩溃时,dump 出进程和线程的堆、栈、寄存器信息的功能。适用于深度定位程序崩溃类疑难故障。

运维实操建议

  1. 例行巡检:建议每月开展日志巡检,重点查看日志中 kernel、error、fatal 级别报错。同时检查操作系统“/var/log/messages”,内核报错、硬件故障往往会记录在这里。GBase 8c 提供了 gs_collector 工具,可按起止时间批量收集指定时间段的全套日志,比逐台登录翻文件高效得多。
  2. 日志清理策略:日志持续增长会占用磁盘空间,建议将超过一个月的日志备份至外部存储,之后再做删除,不要直接删除正在使用的当前日志文件。
  3. 故障处理小技巧:遇到数据库崩溃、主备切换异常,优先收集对应时间段全套日志,再做重启操作;重启会覆盖部分现场信息,不利于问题深度定位。
  4. WAL 日志保护:不要手动删除 pg_xlog 目录下 WAL 文件,误删会直接造成数据恢复能力丢失。


来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/69979120/viewspace-3189050/ ,如需转载,请注明出处,否则将追究法律责任。

下一篇: 没有了~
请登录后发表评论 登录
全部评论
GBASE南大通用,致力于成为用户最信赖的数据库产品供应商!

注册时间:2020-07-16

  • 博文量
    1351
  • 访问量
    1348147