八、Hadoop配置日志的聚集

八、Hadoop配置日志的聚集,第1张

八、Hadoop配置日志的聚集

目的:在web端就可以看到hadoop任务日志。
1)配置yarn-site.xml


    yarn.log-aggregation-enable
    true




    yarn.log.server.url
    http://hadoop102.19888/jobhistory/logs




    yarn.log-aggregation.retain-seconds
    604800

2)分发配置
xysnc $HADOOP_HOME/etc/hadoop/yarn-site.xml
3)关闭NodeManager、ResourceManager和HistoryServer
在103上执行:stop-yarn.sh
在102上执行:mapred --daemon stop historyserver
4)启动NodeManager、ResoureceManager和HistoryServer
在103上执行:start-yarn.sh
在102上执行:mapred --daemon start historyserver

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zaji/5678887.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-12-17
下一篇 2022-12-17

发表评论

登录后才能评论

评论列表(0条)

保存