美文网首页
hadoop考核

hadoop考核

作者: ZHQIAN | 来源:发表于2017-10-12 16:20 被阅读0次

    通过master节点,统一启动与关闭dfs

    关闭dfs: 启动dfs:

    每个hdfs块文件备份2份

    配置文件:
    上传文件实验结果:

    从节点的心跳检查时间间隔10秒

    配置文件:
    down掉slave3的datanode的实验结果:

    hadoop.tmp.dir配置为/var/tmphadoop/

    使用hadoop fs -put命令上传测试文件hello.txt到hdfs的根目录。用java判断该文件是否存在,如果存在,则删除该文件,如果不存在则上传该文件。

    上传文件:

    启动Yarn集群,并且配置mapreduce使用yarn做为资源调度,执行wordcount样例程序。

    相关文章

      网友评论

          本文标题:hadoop考核

          本文链接:https://www.haomeiwen.com/subject/sifoyxtx.html