美文网首页
hadoop配置

hadoop配置

作者: ZhangShiWen | 来源:发表于2018-08-15 19:34 被阅读0次

#  #配置集群:

1. 配置:hadoop-env.sh(修改其中JAVA_HOME)

2. 配置:core-site.xml

<--指定HDFS中NameNode的地址>

<#property>

    <#name>fs.defaultFS

    <#value>hdfs://hadoop101:8020

    主机名

<#/property>

文件存储目录

同上

3. 配置:hafs-site.xml

指定HDFS副本的数量

同上修改name和value值

#  #启动集群

1. 格式化namenode(第一次启动时格式化,以后不用总格式化)

(bin目录中)hdfs namenode -format

2. 启动namenode(sbin目录中)

sbin/hadoop-daemon.sh start namenode

3. 启动dataname

sbin/hadoop-daemon.sh start datanode

格式化时出现的错误,是格式化HDFS获取的主机名根本映射不到一个正确的IP

查看 /etc/sysconfig/network文件中HOSTNAME

与  cat /etc/hosts中ip与主机号是否存在对应

x修改成对应相同就可以,也可以自己设置相同的主机名

4. 查看hdfs系统web端:本机ip:50070

相关文章

网友评论

      本文标题:hadoop配置

      本文链接:https://www.haomeiwen.com/subject/mksbbftx.html