美文网首页
hadoop配置

hadoop配置

作者: ZhangShiWen | 来源:发表于2018-08-15 19:34 被阅读0次

    #  #配置集群:

    1. 配置:hadoop-env.sh(修改其中JAVA_HOME)

    2. 配置:core-site.xml

    <--指定HDFS中NameNode的地址>

    <#property>

        <#name>fs.defaultFS

        <#value>hdfs://hadoop101:8020

        主机名

    <#/property>

    文件存储目录

    同上

    3. 配置:hafs-site.xml

    指定HDFS副本的数量

    同上修改name和value值

    #  #启动集群

    1. 格式化namenode(第一次启动时格式化,以后不用总格式化)

    (bin目录中)hdfs namenode -format

    2. 启动namenode(sbin目录中)

    sbin/hadoop-daemon.sh start namenode

    3. 启动dataname

    sbin/hadoop-daemon.sh start datanode

    格式化时出现的错误,是格式化HDFS获取的主机名根本映射不到一个正确的IP

    查看 /etc/sysconfig/network文件中HOSTNAME

    与  cat /etc/hosts中ip与主机号是否存在对应

    x修改成对应相同就可以,也可以自己设置相同的主机名

    4. 查看hdfs系统web端:本机ip:50070

    相关文章

      网友评论

          本文标题:hadoop配置

          本文链接:https://www.haomeiwen.com/subject/mksbbftx.html