美文网首页java 设计redisIT必备技能
redis进阶-分表分库、读写分离、高可用

redis进阶-分表分库、读写分离、高可用

作者: Martain | 来源:发表于2020-03-23 22:27 被阅读0次

场景:假设如果我们有多台内存为8G的服务器,现在想存下64G的数据,这个时候该如何设计呢?
解决方法:设置多台redis服务器,将数据分别存在这些服务器中。

一、分表分库-模拟启动多个redis服务器

前面我们介绍了根据配置文件来启动redis服务器

redis-server conf-path  #conf-path为配置文件的路径
  • 1、从默认配置中复制出3个配置文件,命名为6380.conf、6381.conf、6382.conf,并将配置文件中的port修改为文件名


    准备好配置文件
  • 2、分别根据这3个配置文件启动服务器


    6380服务启动
  • 3、实现Redis服务网关

import java.io.IOException;
import java.io.InputStream;
import java.net.ServerSocket;
import java.net.Socket;
import java.util.ArrayList;
import java.util.List;
/**
 * @author Martin
 * @version 1.0
 * @date 2020/3/23 7:36 下午
 */
public class RedisSpit {
    // 服务器列表
    public static List<String> servers = new ArrayList<>();
    static {
        servers.add("127.0.0.1:6380");
        servers.add("127.0.0.1:6381");
        servers.add("127.0.0.1:6382");
    }
    public static void main(String[] args) throws IOException {
        /**
         * redis服务器网关 客户端统一连接该网关
         */
        ServerSocket serverSocket = new ServerSocket(12530);
        Socket socket;
        while ((socket = serverSocket.accept())!= null){
            try {
                while (true){
                    InputStream inputStream =  socket.getInputStream();
                    byte[] request = new byte[1024];
                    inputStream.read(request);
                    String req = new String(request);
                    String[] params = req.split("\r\n");
                    int keyLength = Integer.parseInt(params[3].split("\\$")[1]);
                    // 根据键长选择服务器
                    int mod = keyLength % servers.size();
                    String[] serverInfo = servers.get(mod).split(":");
                    // 连接实际的redis服务器
                    Socket client = new Socket(serverInfo[0],Integer.parseInt(serverInfo[1]));
                    // 数据转发
                    client.getOutputStream().write(request);
                    byte[] response = new byte[1024];
                    client.getInputStream().read(response);
                    client.close();
                    // 数据回写
                    socket.getOutputStream().write(response);
                }
            }catch (Exception e){
                e.printStackTrace();
            }
        }
    }
}

这个根据键长对服务器数量取模来进行分库,很方便的完成了对大数据的处理

二、读写分离

读写分离应用到了主从数据库的知识,通过配置主从数据库,来实现读写分离

如何配置redis的主从数据库呢?答案是利用配置文件中的slaveof,配置主节点

格式为  slaveof server port (如果conf里面没有添加即可)
  • 主服务器


    主服务器6380
  • 从服务器


    从服务器6381

三、高可用

未完待续...
原理:及时心跳主服务器,如果主服务器挂了,及时使用从服务器充当主服务器。

一、redis 入门(一)

二、redis 入门(二)

三、手写redis客户端

四、redis 读写分离、高可用

相关文章

  • redis进阶-分表分库、读写分离、高可用

    场景:假设如果我们有多台内存为8G的服务器,现在想存下64G的数据,这个时候该如何设计呢?解决方法:设置多台red...

  • day14 MyCAT--分布式及优化

    六、配置文件模板说明(读写分离) 七 、配置文件--读写分离+高可用 八、垂直分库 九、垂直分表 十、 MyCAT...

  • 高性能Mysql优化方案

    分库分表 读写分离 基本上互联网公司采用的架构是 水平分库+垂直分库(专库专职)+读写分离 水平分库分表 ID 解...

  • 解决大数据量的查询优化

    增加索引 分表 分库 主从分离(读写分离)

  • 企业IT架构笔记6  分库

    垂直分库,读写分离,水平分库(单表数据记录超大),分表,异构数据表或索引表(空间换时间) 1、读写分离:主库承担增...

  • redis分库分表,读写分离

    原文 分库分表 开启多个redis服务 建立路由网关 在网关里设立规则,使不同的键分发到各个redis中 读写分离...

  • 读写分离与分库分表,分布式事务

    读写分离与分库分表,分布式事务 MySql存储引擎,建表规范,事务级别,sql优化,读写分离思想等。 了解过读写分...

  • PFM架构设计

    1、存储高性能 1.1、读写分离: 针对PFA的分析场景,进行读写分离 1.2、 分库分表: 海量核算数据,表分区...

  • 分库分表,读写分离

    垂直(纵向)拆分:将一个库的多个表分散到多个库,或将一根表拆分成多个表,再分散到多个库水平(横向)拆分:将一个表的...

  • MYSQL分库分表

    大众点评订单系统分库分表实践 利用Mycat中间件实现RDS MySQL的分库分表及读写分离功能 MYSQL数...

网友评论

    本文标题:redis进阶-分表分库、读写分离、高可用

    本文链接:https://www.haomeiwen.com/subject/ekkgyhtx.html