美文网首页docker的教程OpsDev组件学习
基于 Docker 的 Redis 高可用集群搭建(redis-

基于 Docker 的 Redis 高可用集群搭建(redis-

作者: 37ec6dd9fc1c | 来源:发表于2019-06-14 08:51 被阅读179次

    前言

    之前介绍了用docker来搭建redis主从环境,但这只是对数据添加了从库备份(主从复制),当主库down掉的时候,从库是不会自动升级为主库的,也就是说,该redis主从集群并非是高可用的。

    目前来说,高可用(主从复制、主从切换)redis集群有两种方案,一种是redis-sentinel,只有一个master,各实例数据保持一致;一种是redis-cluster,也叫分布式redis集群,可以有多个master,数据分片分布在这些master上。

    本文介绍基于docker和redis-sentinel的高可用redis集群搭建,大多数情况下,redis-sentinel也需要做高可用,这里先对redis搭建一主二从环境,另外需要3个redis-sentinel监控redis master。

    很显然,只使用单个redis-sentinel进程来监控redis集群是不可靠的,由于redis-sentinel本身也有single-point-of-failure-problem(单点问题),当出现问题时整个redis集群系统将无法按照预期的方式切换主从。官方推荐:一个健康的集群部署,至少需要3个Sentinel实例。另外,redis-sentinel只需要配置监控redis master,而集群之间可以通过master相互通信。

    实战拓扑图

    redis-sentinel

    redis-sentinel作为独立的服务,用于管理多个redis实例,该系统主要执行以下三个任务:

    • 监控 (Monitor): 检查redis主、从实例是否正常运作
    • 通知 (Notification): 监控的redis服务出现问题时,可通过API发送通知告警
    • 自动故障迁移 (Automatic Failover): 当检测到redis主库不能正常工作时,redis-sentinel会开始做自动故障判断、迁移等操作,先是移除失效redis主服务,然后将其中一个从服务器升级为新的主服务器,并让失效主服务器的其他从服务器改为复制新的主服务器。当客户端试图连接失效的主服务器时,集群也会向客户端返回最新主服务器的地址,使得集群可以使用新的主服务器来代替失效服务器

    环境说明

    • Docker
    • Ubuntu/CentOS
    • Redis v4.0.10

    sentinel.conf

      sentinel.conf是启动redis-sentinel的核心配置文件,可以从官网下载:

        wget http://download.redis.io/redis-stable/sentinel.conf
    

    一主二从

    先搭建好Redis一主二从环境,这里仅给出操作过程,可以参考之前写的《Docker + Redis (4.0.10) 主从环境搭建》,在master上使用info Replication查看集群状态(注意,为了让redis-sentinel可以发现slave,这里要确保redis服务端口和容器映射端口一致):

        # 主库
        docker run -it --name redis-master -d -p 6300:6300 redis redis-server --requirepass redispassword --port 6300
        docker exec -it redis-master bash
        redis-cli -a redispassword -p 6300
        config set masterauth redispassword
    
        # 从库1
        docker run -it --name redis-slave -d -p 6301:6301 redis redis-server --requirepass redispassword --port 6301
        docker exec -it redis-slave bash
        redis-cli -a redispassword -p 6301
        slaveof <master-ip> <master-port>
        config set masterauth redispassword
        
        # 从库2
        docker run -it --name redis-slave2 -d -p 6302:6302 redis redis-server --requirepass redispassword --port 6302
        docker exec -it redis-slave2 bash
        redis-cli -a redispassword -p 6302
        slaveof <master-ip> <master-port>
        config set masterauth redispassword
    
    一主二从

    配置

    根据上面下载好的sentinel.conf,找到并修改如下配置:

        # mymaster:自定义集群名,如果需要监控多个redis集群,只需要配置多次并定义不同的<master-name> <master-redis-ip>:主库ip <master-redis-port>:主库port <quorum>:最小投票数,由于有三台redis-sentinel实例,所以可以设置成2
        sentinel monitor mymaster <master-redis-ip> <master-redis-port> <quorum>
        
        # 注:redis主从库搭建的时候,要么都不配置密码(这样下面这句也不需要配置),不然都需要设置成一样的密码
        sentinel auth-pass mymaster redispassword
        
        # 添加后台运行
        daemonize yes
    

    将上面的sentinel.conf复制三份,分别为sentinel1.conf,sentinel2.confsentinel3.conf,再次编辑修改port26000,2600126002

    启动

      redis-sentinel启动有以下两种方式:

    • redis-sentinel /path/to/sentinel.conf
    • redis-server /path/to/sentinel.conf --sentinel

    大多数版本的redis都支持以上两种方式启动。实战中,为了让redis-sentinel作为独立的服务运行,这里用docker搭建环境:

        # redis-sentinel实例1
        docker run -it --name redis-sentinel1 -v /root/redis/sentinel1.conf:/usr/local/etc/redis/sentinel.conf -d redis /bin/bash
        
        # redis-sentinel实例2
        docker run -it --name redis-sentinel2 -v /root/redis/sentinel2.conf:/usr/local/etc/redis/sentinel.conf -d redis /bin/bash
        
        # redis-sentinel实例3
        docker run -it --name redis-sentinel3 -v /root/redis/sentinel3.conf:/usr/local/etc/redis/sentinel.conf -d redis /bin/bash
    

    分别进入以上三个容器启动redis-sentinel:

        docker exec -it redis-sentinel(x) bash
        # 或redis-server /usr/local/etc/redis/sentinel.conf --sentinel
        redis-sentinel /usr/local/etc/redis/sentinel.conf
    

    连接并使用redis-sentinel API查看监控状况:

        redis-cli -p 26000 (26001 | 26002)
        sentinel master mymaster 或 sentinel slaves mymaster
    
    sentinel master mymaster

    测试

    进入redis-master容器,休眠60秒redis服务:

        docker exec -it redis-master bash
        redis-cli -a redispassword -p 6300 DEBUG sleep 60
    

    进入redis-slave或redis-slave2容器,查看info Replication,可以看到master已经完成了切换。

    原从库切换成主库 redis-sentinel输出主库切换信息

    60秒后原redis主库恢复服务,但降级后当前redis服务已无法恢复原主库身份。

    60秒后原主库服务

    文章已授权获得转载,原文地址:https://blog.mariojd.cn/construction-of-redis-high-availability-cluster-based-on-docker.html

    相关文章

      网友评论

        本文标题:基于 Docker 的 Redis 高可用集群搭建(redis-

        本文链接:https://www.haomeiwen.com/subject/pfegxctx.html