ITPub博客

首页 > 大数据 > Hadoop > Hadoop 日志聚集开启,日志保留时间

Hadoop 日志聚集开启,日志保留时间

原创 Hadoop 作者:元亨利贞 时间:2023-08-22 19:16:50 0 删除 编辑

概述

Hadoop 日志聚集是指将 Hadoop 集群中各个节点上的日志文件收集到一个中心位置,以便于管理和分析。要开启 Hadoop 日志聚集,您需要在 Hadoop 配置文件中进行相应的配置。具体操作步骤如下:

在  yarn-site.xml 文件中,添加以下配置项:

<!-- 开启日志聚集功能 -->
<property>
    <name>yarn.log-aggregation-enable</name>
    <value>true</value>
</property>
<!-- 设置日志聚集服务器地址 -->
<property>  
    <name>yarn.log.server.url</name>  
    <value>
</property>
<!-- 设置日志保留时间为7天 -->
<property>
    <name>yarn.log-aggregation.retain-seconds</name>
    <value>604800</value>
</property>

关闭NodeManager 、 ResourceManager 和 History Server

sbin/stop-yarn.sh
mapred --daemon stop historyserver

启动NodeManager 、 ResourceManage 和 History Server

start-yarn.sh
mapred --daemon start historyserver


来自 “ ITPUB博客 ” ,链接:https://blog.itpub.net/70024433/viewspace-2977563/ ,如需转载,请注明出处,否则将追究法律责任。

下一篇: hadoop 常用端口号
请登录后发表评论 登录
全部评论

注册时间:2022-11-21

  • 博文量
    383
  • 访问量
    248006