YARN的日志聚集配置使用
2018-02-03 本文已影响149人
明明德撩码
修改yarn-site.xml文件
说明:修改路径$hadoop/etc/hadoop下的yarn-site.xml。新增两个属性并保存上传服务器。

属性1:表示在yanr上开启聚合日志服务。
属性2:表示聚合日志在服务器上的存留时间。
2、关掉Yarn的resourcemanager服务

3、关掉Yarn的nodemanager服务

3、关掉MapReduce历史任务服务

4.启动resourcemanager、nodemanager 、historyserver
sbin/yarn-daemon.sh start resourcemanager
sbin/yarn-daemon.sh start nodemanager
sbin/mr-jobhistory-daemon.sh start historyserver
5、计算/user/beifeng/mapreduce/wordcount/*下文件单词出现的次数

6、查看聚集日志

