美文网首页Spark大型项目实战
005.课程环境搭建:zookeeper-3.4.5-cdh5.

005.课程环境搭建:zookeeper-3.4.5-cdh5.

作者: iarchitect | 来源:发表于2018-08-29 16:55 被阅读0次

    安装zookeeper包

    1、将课程提供的zookeeper-3.4.5-cdh5.3.6.tar.gz使用WinSCP拷贝到sparkproject1的/usr/local目录下。
    2、对zookeeper-3.4.5-cdh5.3.6.tar.gz进行解压缩:tar -zxvf zookeeper-3.4.5-cdh5.3.6.tar.gz。
    3、对zookeeper目录进行重命名:mv zookeeper-3.4.5-cdh5.3.6 zk。
    4、配置zookeeper相关的环境变量
    vi ~/.bashrc
    export ZOOKEEPER_HOME=/usr/local/zk
    export PATH=$ZOOKEEPER_HOME/bin
    source ~/.bashrc

    bashrc文件目前为止已经配置的内容


    image.png

    配置zoo.cfg

    cd zk/conf
    mv zoo_sample.cfg zoo.cfg

    vi zoo.cfg
    修改:dataDir=/usr/local/zk/data
    新增:
    server.0=sparkproject1:2888:3888
    server.1=sparkproject2:2888:3888
    server.2=sparkproject3:2888:3888

    节点数为奇数个

    设置zk节点标识

    cd zk
    mkdir data
    cd data

    vi myid
    0

    搭建zk集群

    1、在另外两个节点上按照上述步骤配置ZooKeeper,使用scp将zk和.bashrc拷贝到spark2和spark3上即可。
    2、唯一的区别是spark2和spark3的标识号分别设置为1和2。

    启动zookeeper集群

    1、分别在三台机器上执行:zkServer.sh start。
    2、检查ZooKeeper状态:zkServer.sh status,应该是一个leader,两个follower
    3、jps:检查三个节点是否都有QuromPeerMain进程。

    相关文章

      网友评论

        本文标题:005.课程环境搭建:zookeeper-3.4.5-cdh5.

        本文链接:https://www.haomeiwen.com/subject/ppjkwftx.html