美文网首页
2. 缓存-redis 和 memcached

2. 缓存-redis 和 memcached

作者: 花神子 | 来源:发表于2019-12-24 18:27 被阅读0次

    一 redis 和 memcached 有啥区别?

    1.1 redis 支持复杂的数据结构

    拥有更多的数据结构,能支持更丰富的数据操作。如果需要缓存能够支持更复杂的结构和操作, redis 会是不错的选择。redis 支持数据类型:

    • string : 最简单的类型,就是普通的 set 和 get,做简单的 KV 缓存
    set college szu
    
    • hash : 一般就是可以将结构化的数据,比如一个对象(前提是这个对象没嵌套其他的对象)给缓存在 redis 里,然后每次读写缓存的时候,可以就操作 hash 里的某个字段
    person = {
        "name": "bingo",
        "age": 20,
        "id": 1
    }
    
    hset person name bingo
    hset person age 20
    hset person id 1
    hget person name
    
    • list : list 是有序列表,比如可以通过 list 存储一些列表型的数据结构,类似粉丝列表、文章的评论列表之类的东西。比如可以通过 lrange 命令,读取某个闭区间内的元素,可以基于 list 实现分页查询,这个是很棒的一个功能,基于 redis 实现简单的高性能分页,可以做类似微博那种下拉不断分页的东西,性能高,就一页一页走。
    # 0开始位置,-1结束位置,结束位置为-1时,表示列表的最后一个位置,即查看所有。
    lrange mylist 0 -1
    

    比如可以搞个简单的消息队列,从 list 头怼进去,从 list 尾巴那里弄出来。

    lpush mylist 1
    lpush mylist 2
    lpush mylist 3 4 5
    
    # 1
    rpop mylist
    
    • set : set 是无序集合,自动去重。
    #-------操作一个set-------
    # 添加元素
    sadd mySet 1
    # 查看全部元素
    smembers mySet
    # 判断是否包含某个值
    sismember mySet 3
    # 删除某个/些元素
    srem mySet 1
    srem mySet 2 4
    # 查看元素个数
    scard mySet
    # 随机删除一个元素
    spop mySet
    #-------操作多个set-------
    # 将一个set的元素移动到另外一个set
    smove yourSet mySet 2
    # 求两set的交集
    sinter yourSet mySet
    # 求两set的并集
    sunion yourSet mySet
    # 求在yourSet中而不在mySet中的元素
    sdiff yourSet mySet
    
    • sorted set : sorted set 是排序的 set,去重但可以排序,写进去的时候给一个分数,自动根据分数排序。
    zadd board 85 zhangsan
    zadd board 72 lisi
    zadd board 96 wangwu
    zadd board 63 zhaoliu
    
    # 获取排名前三的用户(默认是升序,所以需要 rev 改为降序)
    zrevrange board 0 3
    
    # 获取某用户的排名
    zrank board zhaoliu
    

    1.2 redis 原生支持集群模式

    在 redis3.x 版本中,便能支持 cluster 模式,而 memcached 没有原生的集群模式,需要依靠客户端(****客户端路由算法****)来实现往集群中分片写入数据。

    性能对比

    由于 redis 只使用单核,而 memcached 可以使用多核,所以平均每一个核上 redis 在存储小数据时比 memcached 性能更高。而在 100k 以上的数据中,memcached 性能要高于 redis。虽然 redis 最近也在存储大数据的性能上进行优化,但是比起 memcached,还是稍有逊色。

    redis 的线程模型

    redis 内部使用(Reactor模型)开发了自己的文件事件处理器 file event handler,这个文件事件处理器是单线程的,所以 redis 才叫做单线程的模型。它采用 IO 多路复用机制同时监听多个 socket,将产生事件的 socket 压入内存队列中,事件分派器根据 socket 上的事件类型来选择对应的事件处理器进行处理。

    • 参考书《Redis 设计与实现》P151-152
      Redis 设计与实现

    文件事件处理器的结构包含 4 个部分:

    • 多个 socket
    • IO 多路复用程序
    • 文件事件分派器
    • 事件处理器(连接应答处理器、命令请求处理器、命令回复处理器)
      多个 socket 可能会并发产生不同的操作,每个操作对应不同的文件事件,但是 IO 多路复用程序会监听多个 socket,会将产生事件的 socket 放入队列中排队,事件分派器每次从队列中取出一个 socket,根据 socket 的事件类型交给对应的事件处理器进行处理。

    来看客户端与 redis 的一次通信过程


    redis-single-thread-model
    • 首先,redis 服务端进程初始化的时候,会将 server socket 的 AE_READABLE 事件与连接应答处理器关联。
    • 客户端 socket01 向 redis 进程的 server socket 请求建立连接,此时 server socket 会产生一个 AE_READABLE 事件,IO 多路复用程序监听到 server socket 产生的事件后,将该 socket 压入队列中。文件事件分派器从队列中获取 socket,交给连接应答处理器。连接应答处理器会创建一个能与客户端通信的 socket01,并将该 socket01 的 AE_READABLE 事件与命令请求处理器关联。
    • 假设此时客户端发送了一个 set key value 请求,此时 redis 中的 socket01 会产生 AE_READABLE 事件,IO 多路复用程序将 socket01 压入队列,此时事件分派器从队列中获取到 socket01 产生的 AE_READABLE 事件,由于前面 socket01 的 AE_READABLE 事件已经与命令请求处理器关联,因此事件分派器将事件交给命令请求处理器来处理。命令请求处理器读取 socket01 的 key value 并在自己内存中完成 key value 的设置。操作完成后,它会将 socket01 的 AE_WRITABLE 事件与命令回复处理器关联。
    • 如果此时客户端准备好接收返回结果了,那么 redis 中的 socket01 会产生一个 AE_WRITABLE 事件,同样压入队列中,事件分派器找到相关联的命令回复处理器,由命令回复处理器对 socket01 输入本次操作的一个结果,比如 ok,之后解除 socket01 的 AE_WRITABLE 事件与命令回复处理器的关联

    二 为啥 redis 单线程模型也能效率这么高?

    • 纯内存操作。
    • 核心是基于非阻塞的 IO 多路复用机制。
    • C 语言实现,一般来说,C 语言实现的程序“距离”操作系统更近,执行速度相对会更快。
    • 单线程反而避免了多线程的频繁上下文切换问题,预防了多线程可能产生的竞争问题

    相关文章

      网友评论

          本文标题:2. 缓存-redis 和 memcached

          本文链接:https://www.haomeiwen.com/subject/pcvfoctx.html