美文网首页
Zookeeper集群搭建

Zookeeper集群搭建

作者: RantLing | 来源:发表于2019-10-27 15:44 被阅读0次

Zookeeper集群搭建比较简单,主要有以下几个步骤:

  1. 下载zookeeper,解压
  2. 创建zoo.cfg,更改相关配置
  3. 修日志路径,日志规则(可选)
  4. 分发包,修改myid

环境配置

项目 版本
JDK 1.8
系统 Centos7
Zookeeper 3.5.5

JDK安装 配置

Oracle官网现在JDK1.8 Linux版本tar包,截止到此文章编写时,Zookeeper官方部署说明中要求的时JDK版本要在1.7及1.7以上。

  1. 上传tar包到服务器解压。创建软链,以便后期JDK版本更新,可以避免更改环境变量。
    ln -s jdk1.8.0_11 java
    image.png
  2. 配置JDK环境变量
    vi ~/.bashrc
    配置如下:
    image.png
  3. 执行source命令,使环境变量生效
    source ~/.bashrc
  4. 验证
    java -version
    image.png

至此,JDK 配置完成!

ZOOKEEPR安装配置

安装

  1. 上穿zookeeper tar包,解压,创建软链,与JDK相同,不做赘述。
  2. 配置环境变量
    vi ~/.bashrc
    image.png
  3. 执行source命令,使环境变量生效
    source ~/.bashrc

配置

因为时集群搭建,这里我们以三台节点为例,节点主机名分别为node01,node02,node03。免密和主机名都已经配置过了。
Zookeeper的主要配置文件为zoo.cfg,路径为:$ZOOKEEPER_HOME/conf,初始没有这个文件,只有一个zoo_sample.cfg。我们可以复制一份,或者直接改名,这里我复制了一下。

cd software/zookeeper/conf
cp zoo_sample.cfg  ./zoo.cfg
  1. 更改主要配置,内容如下:
    image.png
    配置说明:
配置项 说明
tickTime 可以理解成一个单位时间,Zookeeper用来确认心跳或超时。例如客户端的最小的超时时间就可以历程成两个tickTime
dataDir Zookeeper用来存放内存中数据快照(snapshot)的目录,如果没有说明,更新的事务(transaction)日志也会存放在这个目录下面
dataLogDir 事务(transaction)日志存放路径,可选项,如果没有配置则为dataDir
clientPort 客户端连接端口
initLimit follower节点去连接和同步leader的时间,单位时tickTime,上图配置就是10个tick Time,即20秒
syncLimit follower节点同步leader的时间,如果follower节点与leader相差太多就会下线
server.x Zookeeper集群节点,节点启动会在dataDir寻找myid,对应节点的x会与myid中数字相同。第一个是follower连接leader的端口号,第二个端口号用来进行leader选举。

更多配置查询Zookeeper官方说明

  1. 创建myid
    dataDir下创建myid文件,内容与server.x对应。
    echo 1 >> ~/zkdata/myid

  2. 配置日志
    zookeeper 3.5.5默认启动日志是放在zookeeper/logs下的,且日志命名方式确定。如果我们需要自定义日志路径,日志命名和滚动规则,就需要更改对应的启动脚本和配置。

  • 3.1 日志路径更改
    在bin目录下找到zkEnv.sh
    image.png
    可以看到默认的路径,更改这个变量值,就可以以自己指定路径了,更改之后如下:
    image.png
  • 3.2 修改日志命名规则
    在bin目录下找到zkServer.sh
    image.png

修改这个变量值就可以更改命名的格式了。

  • 3.3 修改日志滚动方式
    首先更改zkEnv.sh

    这里修改为
    image.png
    然后修改conf/log4j.properties,主要修改内容如下:
    image.png
    至此日志配置完成。

分发包

将配置好的Zookeeper tar包发送到其他节点上。

scp -r apache-zookeeper-3.5.5-bin node02:/home/zookeeper/software
scp -r apache-zookeeper-3.5.5-bin node03:/home/zookeeper/software

#复制jdk
scp -r jdk1.8.0_11 node02:/home/zookeeper/software
scp -r jdk1.8.0_11 node03:/home/zookeeper/software

#将环境变量复制过去
scp ~/.bashrc  node02:/home/zookeeper/
scp ~/.bashrc  node03:/home/zookeeper/

每个服务器上都要创建软链,执行source命令。
然后启动服务:
zkServer.sh start
验证服务:
zkCli.sh -server localhost:2181

注意,如果启动失败,可能是防火墙没有关闭。可以修改防火墙配置,或者永久关闭防火墙!

相关文章

  • centos7 搭建kafka集群

    搭建kafka集群,需要先搭建zookeeper集群,搭建zookeeper集群,依赖于jdk 1.下载安装jdk...

  • 多台虚拟机搭建zookeeper集群

    zookeeper集群搭建 kafka是把状态保存在zookeeper中的,首先要搭建zookeeper集群。尽管...

  • Zookeeper相关的命令

    Zookeeper集群的搭建参考:zookeeper单机、集群搭建 配置集群的zoo.cfg的配置:server....

  • zookeeper简介(整理)

    zookeeper单机模式搭建Zookeeper集群及伪集群模式搭建 简介 ZooKeeper 是一个开源的分布式...

  • Zookeeper目录

    Zookeeper(windows)伪集群搭建 Zookeeper简介

  • Docker搭建kafka集群

    搭建zookeeper集群 zookeeper集群搭建 拉取kafka镜像 运行容器 主机一: 主机二: 主机三:

  • Kafka集群

    Kafka集群是把状态保存在Zookeeper中的,首先要搭建Zookeeper集群。Zookeeper集群部署请...

  • Zookeeper docker 集群搭建

    zookeeper docker 集群搭建 本地创建三个虚拟机,搭建docker容器的zookeeper集群 首先...

  • 大数据集群搭建2

    大数据集群搭建 本文档将搭建以下集群 hadoop 集群 zookeeper 集群 hbase 集群 spark ...

  • 大数据集群搭建

    大数据集群搭建 本文档将搭建以下集群 hadoop 集群 zookeeper 集群 hbase 集群 spark ...

网友评论

      本文标题:Zookeeper集群搭建

      本文链接:https://www.haomeiwen.com/subject/iavpvctx.html