美文网首页
10:Redis集群cluster

10:Redis集群cluster

作者: _River_ | 来源:发表于2021-04-12 18:52 被阅读0次
    1:Redis解决的问题
    问题1:
    业务发展过程中遇到的峰值瓶颈redis提供的服务OPS可以达到10万/秒,当前业务OPS已经达到10万/秒
    问题2:
    内存单机容量达到256G,当前业务需求内存容量1T
    
    2:Redis官方的推荐的集群模式
    集群就是使用网络将若干台计算机联通起来,并提供统一的管理方式,使其对外呈现单机的服务效果
    集群就是使用网络将若干台计算机联通起来,并提供统一的管理方式,使其对外呈现单机的服务效果
    集群就是使用网络将若干台计算机联通起来,并提供统一的管理方式,使其对外呈现单机的服务效果
    
    分散单台服务器的访问压力,实现负载均衡
    分散单台服务器的存储压力,实现可扩展性
    降低单台服务器宕机带来的业务灾难
    
    3:Cluster集群结构设计
    数据存储设计:
    1:通过算法设计,计算出key应该保存的位置
    2:将所有的存储空间计划切割成16384份,每台主机保存一部分
        注意:每份代表的是一个存储空间(可以存多个key的),不是一个key的保存空间    
    3:将key按照计算出的结果放到对应的存储空
    
    那redis的集群是如何增强可扩展性的呢?譬如我们要增加一个集群节点
    三个原有的redis 各自给出一点空间新的redis
    
    当我们查找数据时,集群是如何操作的呢?
    
    各个数据库相互通信,保存各个库中槽的编号数据
    一次命中,直接返回
    一次未命中,告知具体位置
    
     如在A Redis服务器  有数据:
        1到10槽   在A中(自己这里)
        11到20槽 在B中  B服务器
        21到30槽 在C中  C服务器
        31到40槽 在D中  D服务器
        
    一开始是拿着key对应的槽编号  随机请求服务器  
    
    4:Cluster集群结构设计
    首先要明确的几个要点:
        1:配置服务器(3主3从)
        2:建立通信(Meet)
        3:分槽(Slot)
    
    redis.config配置:
        1:是否启用cluster,加入cluster节点
             cluster-enabled yes|no        
             
        2:cluster配置文件名,该文件属于自动生成,仅用于快速查找文件并查询文件内容
            cluster-config-file filename
            
        3:节点服务响应超时时间,用于判定该节点是否下线或切换为从节点    
            cluster-node-timeout milliseconds
            
        4:master连接的slave最小数量     
            cluster-migration-barrier min_slave_number
            
      Cluster节点操作命令     
        cluster nodes:查看集群节点信息
    

    集群操作命令
        创建集群
        redis-cli 
        –-cluster create 
        masterhost1:masterport1 
        masterhost2:masterport2  
        masterhost3:masterport3 
       slavehost1:slaveport1  
       slavehost2:slaveport2 
       slavehost3:slaveport3 
       -–cluster-replicas n 
                
    注意:master与slave的数量要匹配,一个master对应n个slave,由最后的参数n决定  
            master与slave的匹配顺序为第一个master与前n个slave分为一组,形成主从结构
            
            -–cluster-replicas 1  (就是 1主带1从 前3个是主 后3个是从)
             -–cluster-replicas 2  (就是 1主带2从 前2个是主 后4个是从)
      
     执行完命令后:会预先显示集群信息(包含分槽信息),然后需要等自己最后确认
          
    注意:先启动master服务器  
        redis-server /redis/conf/redis.conf
    

    集群搭建好后尝试添加数据:
    redis-cli -p 6501 (以普通redis命令进入客户端)
    set name hesuijin
    (error) MOVED 5798 127.0.0.1:6502 (该key对应的槽口5798 在 6502  你需要去6502执行)
    
    redis-cli -c -p 6501 (以集群redis命令进入客户端)
    set name hesuijin
    Redirected  to slot [5798] located at 127.0.0.1:6502 (该key对应的槽口5798 在 6502  现在自动跳到6502执行)
    

    5:Cluster集群 新增节点 或 删除节点
    进入其中一个节点 使用 cluster nodes  可以差个集群里面各个主从节点的状态
    
    master :6501 6502  6503    slave :6504 6505 6506
    添加master  6507                添加slave   6508
    

     添加master
            到当前集群中,连接时可以指定任意现有节点地址与端口
      redis-cli --cluster add-node new-master-host:new-master-port now-host:now-port
      
      新的slave(127.0.0.1:6507)   使用集群的任何节点都行(127.0.0.1:6503) 
      redis-cli --cluster add-node 127.0.0.1:6507 127.0.0.1:6506
    

    添加slave
      redis-cli --cluster add-node new-slave-host:new-slave-port master-host:master-port 
                 --cluster-slave --cluster-master-id masterid
    
      新的slave(127.0.0.1:6508)  添加到的master(127.0.0.1:6503) 添加到的masterID (IDIDIDIDIDIDID)      
      redis-cli --cluster add-node 127.0.0.1:6508 127.0.0.1:6503  
                 --cluster-slave --cluster-master-id IDIDIDIDIDIDID
    

    删除节点(slave)  随便删
    redis-cli --cluster del-node del-host:del-port del-slave-id
    
    删除节点(master) 如果删除的节点是master,必须保障其中没有槽slot
    redis-cli --cluster del-node del-host:del-port del-master-id
    

    重新分槽,分槽是从具有槽的master中划分一部分给其他master,过程中不创建新的槽
    指定目标得到的槽的数量,所有的槽将平均从每个来源的master处获取重新分配槽
    
    slots推荐为16384除以4(平均)
    
    redis-cli 
    --cluster reshard new-master-host:new-master:port 
    --cluster-from src-master-id1, src-master-id2, src-master-id3
    --cluster-to target-master-id 
    --  cluster-slots slots  (这个target一共多少个slots)
     
     1:处理哪个master
     2:哪个masterId需要提供槽     将需要参与分槽的所有masterid不分先后顺序添加到参数中,使用,分隔
     3:哪个masterId需要获取槽
     4:该master最后需要多少个槽
    

    清空槽:
    从具有槽的master中分配指定数量的槽到另一个master中,常用于清空指定master中的槽
    
    redis-cli 
    --cluster reshard src-master-host:src-master-port 
    --cluster-from src-master-id       哪个masterId需要提供槽 
    --cluster-to target-master-id       哪个masterId需要获取槽
    --cluster-slots slots 
    --cluster-yes  (每个target多少个slots)

    相关文章

      网友评论

          本文标题:10:Redis集群cluster

          本文链接:https://www.haomeiwen.com/subject/nnoxlltx.html