美文网首页
一、Hadoop安装及测试环境搭建

一、Hadoop安装及测试环境搭建

作者: 骑猴摘月亮 | 来源:发表于2019-07-23 17:31 被阅读0次

一、Hadoop安装

安装方式同JDK ,环境变量配置如下

#HADOOP_HOME

export HADOOP_HOME=/******/******/hadoop-*.*.*

export PATH=${PATH}:${HADOOP_HOME}/bin

安装完成后,【hadoop version】查看是否安装成功

二、伪分布模式

    1、修改core-site.xml    

            core-site.xml 在hadoop根目录 /etc/hadoop/下

            添加            

              <configuration>

               <!-- 指定HDFS中NameNode的地址 -->

                <property>

                                <name>fs.defaultFS</name>

                                <!--hadoopmaster是我的主机名,可以换成ip或localhost-->

                                <value>hdfs://hadoopmaster:9000</value>

                </property>

                <property>

                                 <!--这个配置是将hadoop的临时目录改成自定义的目录下-->

                                 <name>hadoop.tmp.dir</name>

                                <value>/opt/module/hadoop-2.6.5/data/tmp</value>

                  </property>

                </configuration>

    2、修改hdfs-site.xml

            <configuration>

                    <!-- 指定HDFS副本的数量 -->

                    <property>

                            <name>dfs.replication</name>

                            <value>1</value>

                    </property>

            </configuration>

    3、格式化namenode

            【hdfs namenode -format】          

              成功:

        4、启动namenode

                切换到hadoop根目录下sbin目录中

                【./hadoop-daemon.sh start namenode】或【hdfs --daemon start namenode】启动

                  注:前一个命令如果被弃用,可以使用后一个

前一个命令被弃用

                        【jps】查看是否启动成功

启动成功

          5、同理启动datanode

                  【hdfs --daemon start datanode】 

启动成功

相关文章

网友评论

      本文标题:一、Hadoop安装及测试环境搭建

      本文链接:https://www.haomeiwen.com/subject/ejlalctx.html