美文网首页
Apache zookeeper

Apache zookeeper

作者: HAO延WEI | 来源:发表于2020-05-01 10:51 被阅读0次

    Zookeeper 概述


    安装zookeeper之前,我们看下zookeeper简介 https://baike.baidu.com/item/zookeeper/4836397?fr=aladdin

    1,什么是 ZooKeeper
    ZooKeeper 是一个开源的分布式协调服务

    ZooKeeper框架最初是在“Yahoo!"上构建的,用于以简单而稳健的方式访问他们的应用程序。 后来,Apache ZooKeeper成为Hadoop,HBase和其他分布式框架使用的有组织服务的标准。 例如,Apache HBase使用ZooKeeper跟踪分布式数据的状态。

    ZooKeeper 的设计目标是将那些复杂且容易出错的分布式一致性服务封装起来,构成一个高效可靠的原语集,并以一系列简单易用的接口提供给用户使用。
    ZooKeeper 是一个典型的分布式数据一致性解决方案,分布式应用程序可以基于 ZooKeeper 实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master 选举、分布式锁和分布式队列等功能
    Zookeeper 一个最常用的使用场景就是用于担任服务生产者和服务消费者的注册中心。

    2. 重要概念总结

    • ZooKeeper 本身就是一个分布式程序(只要半数以上节点存活,ZooKeeper 就能正常服务)。
    • 为了保证高可用,最好是以集群形态来部署 ZooKeeper,这样只要集群中大部分机器是可用的(能够容忍一定的机器故障),那么 ZooKeeper 本身仍然是可用的。
    • ZooKeeper 将数据保存在内存中,这也就保证了 高吞吐量和低延迟(但是内存限制了能够存储的容量不太大,此限制也是保持znode中存储的数据量较小的进一步原因)。
    • ZooKeeper 是高性能的。 在“读”多于“写”的应用程序中尤其地高性能,因为“写”会导致所有的服务器间同步状态。(“读”多于“写”是协调服务的典型场景。)
    • ZooKeeper有临时节点的概念。 当创建临时节点的客户端会话一直保持活动,瞬时节点就一直存在。而当会话终结时,瞬时节点被删除。持久节点是指一旦这个ZNode被创建了,除非主动进行ZNode的移除操作,否则这个ZNode将一直保存在Zookeeper上。
    • ZooKeeper 底层其实只提供了两个功能:
      ①管理(存储、读取)用户程序提交的数据;
      ②为用户程序提交数据节点监听服务。

    3. ZooKeeper的好处

    • 简单的分布式协调过程
    • 同步 - 服务器进程之间的相互排斥和协作。此过程有助于Apache HBase进行配置管理。
    • 有序的消息
    • 序列化 - 根据特定规则对数据进行编码。确保应用程序运行一致。这种方法可以在MapReduce中用来协> - 调队列以执行运行的线程。
    • 可靠性
    • 原子性 - 数据转移完全成功或完全失败,但没有事务是部分的。

    4.zookeeper应用场景

    • (1)集群统一配置管理
    • (2)集群统一命名服务
    • (3)集群统一管理
    • (4)服务器的动态上下线感知
    • (5)负载均衡

    5. 结合个人使用情况的讲一下 ZooKeeper

    在我自己做过的项目中,主要使用到了 ZooKeeper 作为 Dubbo 的注册中心(Dubbo 官方推荐使用 ZooKeeper注册中心)。另外在搭建 solr 集群的时候,我使用 ZooKeeper 作为 solr 集群的管理工具。这时,

    ZooKeeper 主要提供下面几个功能:
    • 1、集群管理:容错、负载均衡。
    • 2、配置文件的集中管理
    • 3、集群的入口。
      我个人觉得在使用 ZooKeeper 的时候,最好是使用 集群版的 ZooKeeper 而不是单机版的。官网给出的架构图就描述的是一个集群版的 ZooKeeper 。通常 3 台服务器就可以构成一个 ZooKeeper 集群了。

    6. 为什么最好使用奇数台服务器构成 ZooKeeper 集群?

    我们知道在Zookeeper中 Leader 选举算法采用了Zab协议。Zab核心思想是当多数 Server 写成功,则任务数据写成功。

    • ①如果有3个Server,则最多允许1个Server 挂掉。
    • ②如果有4个Server,则同样最多允许1个Server挂掉。
    • 既然3个或者4个Server,同样最多允许1个Server挂掉,那么它们的可靠性是一样的,所以选择奇数个ZooKeeper Server即可,这里选择3个Server。12341234

    相关文章

      网友评论

          本文标题:Apache zookeeper

          本文链接:https://www.haomeiwen.com/subject/nfbfghtx.html