美文网首页大数据程序员
hadoop的mapReduce历史服务配置及查看

hadoop的mapReduce历史服务配置及查看

作者: 明明德撩码 | 来源:发表于2018-02-03 11:27 被阅读15次

    查看MapReduce历史执行情况报错

    查看已经运行完成的MapReduce作业记录,比如用了多少个Map、用了多少个Reduce、作业提交时间、作业启动时间、作业完成时间等信息。

    image.png

    默认情况下,历史服务器是没有启动的。

    启动

    $ sbin/mr-jobhistory-daemon.sh start historyserver

    WEB UI

    http://hadoop-senior.ibeifeng.com:19888/

    停止

    $ sbin/mr-jobhistory-daemon.sh stop historyserver

    image.png

    点击logs

    没有配置日志的聚集功能(见下篇文章YARN的日志聚集配置使用

    image.png

    相关文章

      网友评论

        本文标题:hadoop的mapReduce历史服务配置及查看

        本文链接:https://www.haomeiwen.com/subject/rbayzxtx.html