美文网首页
Hadoop安装

Hadoop安装

作者: 木头左 | 来源:发表于2018-09-30 19:58 被阅读0次

    Hadoop安装

    一、 Hadoop

    1、 安装

    安装并配置hadoop-2.6.4(在master中)

    (1)将hadoop-2.6.4.tar.gz安装包复制到hadoop文件目录下(与windows环境下类似)。

    (2)解压hadoop-2.6.4.tar.gz

    cd

    cd hadoop

    tar -zxvf  hadoop-2.6.4.tar.gz

    添加环境变量:vim /etc/profile

    在最后添加

    # set hadoop environment

    export HADOOP_HOME=/usr/hadoop-2.6.2

    exportPATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

    生效:source /etc/profile

    配置Hadoop (cd /usr/hadoop-2.6.2)

    1、vi core-site.xml

                   hadoop.tmp.dir

                    /usr/hadoop-2.6.2/tmp

                    Abase forother temporary directories.

                   fs.defaultFS

                   hdfs://master:9000

                   io.file.buffer.size

                    4096

    2、vi hadoop-env.sh 在开头加上exportJAVA_HOME=/usr/jdk1.7.0_79

    3、vi yarn-env.sh 在开头加上exportJAVA_HOME=/usr/jdk1.7.0_79

    4、vi hdfs-site.xml

    7、vi slaves

    slave1

    slave2

    8、复制到slave上scp -r/usr/hadoop-2.6.2/ root@slave1:/usr/

    9、配置slave上的Hadoop环境变量

    添加环境变量:vim /etc/profile

    在最后添加

    # set hadoop environment

    export HADOOP_HOME=/usr/local/hadoop-2.8.4

    export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

    生效:source /etc/profile

    10、启动

    先启动hadoop集群start-all.sh

    相关文章

      网友评论

          本文标题:Hadoop安装

          本文链接:https://www.haomeiwen.com/subject/akfgoftx.html