YARN的日志聚集配置使用

修改yarn-site.xml文件

说明:修改路径$hadoop/etc/hadoop下的yarn-site.xml。新增两个属性并保存上传服务器。


属性1:表示在yanr上开启聚合日志服务。
属性2:表示聚合日志在服务器上的存留时间。

2、关掉Yarn的resourcemanager服务

3、关掉Yarn的nodemanager服务

3、关掉MapReduce历史任务服务

4.启动resourcemanager、nodemanager 、historyserver

sbin/yarn-daemon.sh start resourcemanager
sbin/yarn-daemon.sh start nodemanager
sbin/mr-jobhistory-daemon.sh start historyserver

5、计算/user/beifeng/mapreduce/wordcount/*下文件单词出现的次数

image.png

6、查看聚集日志

image.png
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
【社区内容提示】社区部分内容疑似由AI辅助生成,浏览时请结合常识与多方信息审慎甄别。
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

相关阅读更多精彩内容

友情链接更多精彩内容