美文网首页
【原创】五、Hadoop 2.5.2分布式环境部署

【原创】五、Hadoop 2.5.2分布式环境部署

作者: wind001 | 来源:发表于2017-01-25 12:56 被阅读0次

    一、地址规划

    二、

    按照之前安装的机器,克隆两台机器,分别修改hostname、网卡和ip,配置NTP时间同步

    修改主机名:vi /etc/sysconfig/network

    修改ip:vi/etc/sysconfig/network-scripts/ifcfg-eth0

    修改网卡:vi /etc/udev/rules.d/70-persistent-net.rules

    Reboot重新启动。

    三、

    三台机器进行无密登陆配置。

    Bigdata01===》bigdata01, bigdata02, bigdata03

    Bigdata02===》bigdata01, bigdata02, bigdata03

    ssh-keygen -t rsa

    ssh-copy-id -i bigdata01.xxxx.com

    ssh-copy-id -i bigdata02.xxxx.com

    ssh-copy-id -i bigdata03.xxxx.com

    Core配置

    Hdfs配置

    slaves配置

    Yarn配置

    Mapreduce配置

    启动

    1、bigdata01.xxxx.com进行namenode格式化。

    [jit@bigdata01 hadoop-2.5.2]$ bin/hdfs namenode–format

    然后启动hdfs

    [jit@bigdata01 hadoop-2.5.2]$ sbin/start-dfs.sh

    2、bigdata02.xxxx.com启动yarn

    [jit@bigdata02 hadoop-2.5.2]$ sbin/start-yarn.sh

    3、bigdata03.xxxx.com启动

    [jit@bigdata03 app]$ sbin/mr-jobhistory-daemon.sh start historyserver

    四、查看是否启动

    hdfs创建目录,上传文件,Mapreduce例子运行

    查看运行结果

    相关文章

      网友评论

          本文标题: 【原创】五、Hadoop 2.5.2分布式环境部署

          本文链接:https://www.haomeiwen.com/subject/xcbtittx.html