美文网首页大数据程序员
YARN的日志聚集配置使用

YARN的日志聚集配置使用

作者: 明明德撩码 | 来源:发表于2018-02-03 23:53 被阅读149次

    修改yarn-site.xml文件

    说明:修改路径$hadoop/etc/hadoop下的yarn-site.xml。新增两个属性并保存上传服务器。


    属性1:表示在yanr上开启聚合日志服务。
    属性2:表示聚合日志在服务器上的存留时间。

    2、关掉Yarn的resourcemanager服务

    3、关掉Yarn的nodemanager服务

    3、关掉MapReduce历史任务服务

    4.启动resourcemanager、nodemanager 、historyserver

    sbin/yarn-daemon.sh start resourcemanager
    sbin/yarn-daemon.sh start nodemanager
    sbin/mr-jobhistory-daemon.sh start historyserver

    5、计算/user/beifeng/mapreduce/wordcount/*下文件单词出现的次数

    image.png

    6、查看聚集日志

    image.png

    相关文章

      网友评论

        本文标题:YARN的日志聚集配置使用

        本文链接:https://www.haomeiwen.com/subject/dzupzxtx.html