YYCache源码分析(二)

作者: 汉斯哈哈哈 | 来源:发表于2016-06-10 16:18 被阅读3500次

本文分析YYMemoryCache实现原理:

YYMemoryCache是内存缓存,所以存取速度非常快,主要用到两种数据结构的LRU淘汰算法

1.LRU

Cache的容量是有限的,当Cache的空间都被占满后,如果再次发生缓存失效,就必须选择一个缓存块来替换掉.LRU法是依据各块使用的情况, 总是选择那个最长时间未被使用的块替换。这种方法比较好地反映了程序局部性规律

2.LRU主要采用两种数据结构实现

  • 双向链表(Doubly Linked List)
  • 哈希表(Dictionary)

3.对一个Cache的操作无非三种:插入、替换、查找

  • 插入:当Cache未满时,新的数据项只需插到双链表头部即可
  • 替换:当Cache已满时,将新的数据项插到双链表头部,并删除双链表的尾结点即可
  • 查找:每次数据项被查询到时,都将此数据项移动到链表头部

4.分析图(分析源码时可以对照该图)


5.YYMemoryCache.m里的两个分类

链表节点_YYLinkedMapNode

@interface _YYLinkedMapNode : NSObject {
    @package
    // 指向前一个节点
    __unsafe_unretained _YYLinkedMapNode *_prev; // retained by dic
    // 指向后一个节点
    __unsafe_unretained _YYLinkedMapNode *_next; // retained by dic
    // 缓存key
    id _key;
    // 缓存对象
    id _value;
    // 当前缓存内存开销
    NSUInteger _cost;
    // 缓存时间
    NSTimeInterval _time;
}
@end

链表_YYLinkedMap

@interface _YYLinkedMap : NSObject {
    @package
    // 用字典保存所有节点_YYLinkedMapNode (为什么不用oc字典?因为用CFMutableDictionaryRef效率高,毕竟基于c)
    CFMutableDictionaryRef _dic;
    // 总缓存开销
    NSUInteger _totalCost;
    // 总缓存数量
    NSUInteger _totalCount;
    // 链表头节点
    _YYLinkedMapNode *_head;
    // 链表尾节点
    _YYLinkedMapNode *_tail;
    // 是否在主线程上,异步释放 _YYLinkedMapNode对象
    BOOL _releaseOnMainThread;
    // 是否异步释放 _YYLinkedMapNode对象
    BOOL _releaseAsynchronously;
}
// 添加节点到链表头节点
- (void)insertNodeAtHead:(_YYLinkedMapNode *)node;
// 移动当前节点到链表头节点
- (void)bringNodeToHead:(_YYLinkedMapNode *)node;
// 移除链表节点
- (void)removeNode:(_YYLinkedMapNode *)node;
// 移除链表尾节点(如果存在)
- (_YYLinkedMapNode *)removeTailNode;
// 移除所有缓存
- (void)removeAll;
@end

方法插入、替换、查找方法实现:

// 添加节点到链表头节点
- (void)insertNodeAtHead:(_YYLinkedMapNode *)node {
    // 字典保存链表节点node
    CFDictionarySetValue(_dic, (__bridge const void *)(node->_key), (__bridge const void *)(node));
    // 叠加该缓存开销到总内存开销
    _totalCost += node->_cost;
    // 总缓存数+1
    _totalCount++;
    if (_head) {
        // 存在链表头,取代当前表头
        node->_next = _head;
        _head->_prev = node;
        // 重新赋值链表表头临时变量_head
        _head = node;
    } else {
        // 不存在链表头
        _head = _tail = node;
    }
}

存在表头情况图形分析(其他情况不用图分析,自己想象吧,呵呵)


// 移动当前节点到链表头节点
- (void)bringNodeToHead:(_YYLinkedMapNode *)node {
    // 当前节点已是链表头节点
    if (_head == node) return;

    if (_tail == node) {
        //**如果node是链表尾节点**

        // 把node指向的上一个节点赋值给链表尾节点
        _tail = node->_prev;
        // 把链表尾节点指向的下一个节点赋值nil
        _tail->_next = nil;
    } else {
        //**如果node是非链表尾节点和链表头节点**

        // 把node指向的上一个节点赋值給node指向的下一个节点node指向的上一个节点
        node->_next->_prev = node->_prev;
        // 把node指向的下一个节点赋值给node指向的上一个节点node指向的下一个节点
        node->_prev->_next = node->_next;
    }
    // 把链表头节点赋值给node指向的下一个节点
    node->_next = _head;
    // 把node指向的上一个节点赋值nil
    node->_prev = nil;
    // 把节点赋值给链表头节点的指向的上一个节点
    _head->_prev = node;
    _head = node;
}

如果node是非链表尾节点和链表头节点情况图形分析(其他情况不用图分析,自己想象吧,呵呵)


// 移除节点
- (void)removeNode:(_YYLinkedMapNode *)node {
    // 从字典中移除node
    CFDictionaryRemoveValue(_dic, (__bridge const void *)(node->_key));
    // 减掉总内存消耗
    _totalCost -= node->_cost;
    // // 总缓存数-1
    _totalCount--;
    // 重新连接链表(看图分析吧)
    if (node->_next) node->_next->_prev = node->_prev;
    if (node->_prev) node->_prev->_next = node->_next;
    if (_head == node) _head = node->_next;
    if (_tail == node) _tail = node->_prev;
}
// 移除尾节点(如果存在)
- (_YYLinkedMapNode *)removeTailNode {
    if (!_tail) return nil;
    // 拷贝一份要删除的尾节点指针
    _YYLinkedMapNode *tail = _tail;
    // 移除链表尾节点
    CFDictionaryRemoveValue(_dic, (__bridge const void *)(_tail->_key));
    // 减掉总内存消耗
    _totalCost -= _tail->_cost;
    // 总缓存数-1
    _totalCount--;
    if (_head == _tail) {
        // 清除节点,链表上已无节点了
        _head = _tail = nil;
    } else {
        // 设倒数第二个节点为链表尾节点
        _tail = _tail->_prev;
        _tail->_next = nil;
    }
    // 返回完tail后_tail将会释放
    return tail;
}

// 移除所有缓存
- (void)removeAll {
    // 清空内存开销与缓存数量
    _totalCost = 0;
    _totalCount = 0;
    // 清空头尾节点
    _head = nil;
    _tail = nil;

    if (CFDictionaryGetCount(_dic) > 0) {
        // 拷贝一份字典
        CFMutableDictionaryRef holder = _dic;
        // 重新分配新的空间
        _dic = CFDictionaryCreateMutable(CFAllocatorGetDefault(), 0, &kCFTypeDictionaryKeyCallBacks, &kCFTypeDictionaryValueCallBacks);

        if (_releaseAsynchronously) {
            // 异步释放缓存
            dispatch_queue_t queue = _releaseOnMainThread ? dispatch_get_main_queue() : YYMemoryCacheGetReleaseQueue();
            dispatch_async(queue, ^{
                CFRelease(holder); // hold and release in specified queue
            });
        } else if (_releaseOnMainThread && !pthread_main_np()) {
            // 主线程上释放缓存
            dispatch_async(dispatch_get_main_queue(), ^{
                CFRelease(holder); // hold and release in specified queue
            });
        } else {
            // 同步释放缓存
            CFRelease(holder);
        }
    }
}

YYMemoryCache.m实现分析(如果上面弄清楚,接下来就简单多了),增删改都是调用上面的方法,下面分析查找与添加缓存方法实现

// 查找缓存
- (id)objectForKey:(id)key {
    if (!key) return nil;
    // 加锁,防止资源竞争
    // OSSpinLock 自旋锁,性能最高的锁。原理很简单,就是一直 do while 忙等。它的缺点是当等待时会消耗大量 CPU 资源,所以它不适用于较长时间的任务。对于内存缓存的存取来说,它非常合适。
    pthread_mutex_lock(&_lock);
    // _lru为链表_YYLinkedMap,全部节点存在_lru->_dic中
    // 获取节点
    _YYLinkedMapNode *node = CFDictionaryGetValue(_lru->_dic, (__bridge const void *)(key));
    if (node) {
        //** 有对应缓存 **

        // 重新更新缓存时间
        node->_time = CACurrentMediaTime();
        // 把当前node移到链表表头(为什么移到表头?根据LRU淘汰算法:Cache的容量是有限的,当Cache的空间都被占满后,如果再次发生缓存失效,就必须选择一个缓存块来替换掉.LRU法是依据各块使用的情况, 总是选择那个最长时间未被使用的块替换。这种方法比较好地反映了程序局部性规律)
        [_lru bringNodeToHead:node];
    }
    // 解锁
    pthread_mutex_unlock(&_lock);
    // 有缓存则返回缓存值
    return node ? node->_value : nil;
}
// 添加缓存
- (void)setObject:(id)object forKey:(id)key withCost:(NSUInteger)cost {
    if (!key) return;
    if (!object) {
        // ** 缓存对象为空,移除缓存 **
        [self removeObjectForKey:key];
        return;
    }
    // 加锁
    pthread_mutex_lock(&_lock);

    // 查找缓存
    _YYLinkedMapNode *node = CFDictionaryGetValue(_lru->_dic, (__bridge const void *)(key));

    // 当前时间
    NSTimeInterval now = CACurrentMediaTime();
    if (node) {
        //** 之前有缓存,更新旧缓存 **

        // 更新值
        _lru->_totalCost -= node->_cost;
        _lru->_totalCost += cost;
        node->_cost = cost;
        node->_time = now;
        node->_value = object;

        // 移动节点到链表表头
        [_lru bringNodeToHead:node];
    } else {
        //** 之前未有缓存,添加新缓存 **

        // 新建节点
        node = [_YYLinkedMapNode new];
        node->_cost = cost;
        node->_time = now;
        node->_key = key;
        node->_value = object;

        // 添加节点到表头
        [_lru insertNodeAtHead:node];
    }
    if (_lru->_totalCost > _costLimit) {
        // ** 总缓存开销大于设定的开销 **

        // 异步清理最久未使用的缓存
        dispatch_async(_queue, ^{
            [self trimToCost:_costLimit];
        });
    }
    if (_lru->_totalCount > _countLimit) {
        // ** 总缓存数量大于设定的数量 **

        // 移除链表尾节点(最久未访问的缓存)
        _YYLinkedMapNode *node = [_lru removeTailNode];
        if (_lru->_releaseAsynchronously) {
            dispatch_queue_t queue = _lru->_releaseOnMainThread ? dispatch_get_main_queue() : YYMemoryCacheGetReleaseQueue();
            dispatch_async(queue, ^{
                [node class]; //  and release in queue
            });
        } else if (_lru->_releaseOnMainThread && !pthread_main_np()) {
            dispatch_async(dispatch_get_main_queue(), ^{
                [node class]; //hold and release in queue
            });
        }
    }
    pthread_mutex_unlock(&_lock);
}

YYCache源码分析(一)
YYCache源码分析(三)

相关文章

  • iOS开发小贴:缓存

    YYCache学习篇 首先,YYCache GitHub地址 YYCache源码分析(一)YYCache源码分析(...

  • YYCache源码分析(二)

    YYCache源码分析(二) 原文链接:http://www.jianshu.com/p/492c3c3a0485...

  • YYCache源码分析(二)

    本文分析YYMemoryCache实现原理: YYMemoryCache是内存缓存,所以存取速度非常快,主要用到两...

  • YYCache源码分析(三)

    YYCache源码分析(三) 本文分析YYDiskCache->YYKVStorage实现过程:YYDiskCac...

  • YYCache源码分析

    YYCache源码分析[https://juejin.im/post/6844903554214264840#he...

  • YYKit-YYCache源码分析

    YYKit-YYCache源码分析 YYCache是一个高性能iOS缓存框架,是YYKit组件之一。 框架架构 Y...

  • YYCache源码分析

    YYMemoryCache YYMemoryCache用于对内存缓存进行管理,与SDWebImage对于内存缓存管...

  • YYCache源码分析

    YYCache是用于Objective-C中用于缓存的第三方框架。此文主要用来讲解该框架的实现细节,性能分 ...

  • YYCache源码分析

    YYCache是用于Objective-C中用于缓存的第三方框架。此文主要用来讲解该框架的实现细节,性能分析、设计...

  • YYCache源码分析

    缓存是由内存缓存和磁盘缓存组成,内存缓存提供容量小但高速的存取功能,磁盘缓存提供大容量但低速的持久化存储。 这里通...

网友评论

  • 乔英:谢谢大神分享
  • 15d6bcef0c22:// OSSpinLock 自旋锁,性能最高的锁。原理很简单,就是一直 do while 忙等。它的缺点是当等待时会消耗大量 CPU 资源,所以它不适用于较长时间的任务。对于内存缓存的存取来说,它非常合适。
    pthread_mutex_lock(&_lock)
    现在YYMemoryCache 用的不是 OSSpinLock 这个锁,是 pthread_mutex,OSSpinLock不再安全,pthread_mutex 得到了苹果的优化,具体可以去看作者的博客
  • 3555176d4c68:// 查找缓存
    - (id)objectForKey:(id)key {
    if (!key) return nil;
    // 加锁,防止资源竞争
    // OSSpinLock 自旋锁,性能最高的锁。原理很简单,就是一直 do while 忙等。它的缺点是当等待时会消耗大量 CPU 资源,所以它不适用于较长时间的任务。对于内存缓存的存取来说,它非常合适。
    pthread_mutex_lock(&_lock);
    ...

    这里是互斥锁吧?
  • sunnyxg0812:拜读啦 大神写的不错
  • skylor:添加表头到连表头节点到_prev 指针指反了吧?
  • 6a53b918bd3c:YYMemoryCache 中

    (void)setObject:(id)object forKey:(id)key {
    [self setObject:object forKey:key withCost:0];
    }
    cost为0 这个内存大小的限制岂不一点用都没有?
    skylor:添加表头到连表头节点到_prev 指针指反了吧?
    未来靠打拼:是的,内存并没有实现lru算法,我最近看了pinCache也有同样的问题,不知道是bug呢 还是没实现呢?
  • DoubleShawn:汉斯先生,您好。我有一个问题想请教您。YYMemoryCache这个类,既不是单例,里面的链表头也不是全局变量。我在不同的地方 创建YYMemoryCacheA,YYMemoryCacheB, YYMemoryCacheC,YYCache是怎么能保证他们获取到的链表是同一个链表的呢?
    汉斯哈哈哈:@DoubleShawn 对,如果实现你之前那种需求,要用YYDiskCache缓存到硬盘,或者弄个单例或全局变量勾住YYMemoryCache。但其实YYCache同时缓存硬盘与内存,看下面:
    - (void)setObject:(id<NSCoding>)object forKey:(NSString *)key {
    [_memoryCache setObject:object forKey:key];
    [_diskCache setObject:object forKey:key];
    }
    假设用 :
    YYCache *cache = [YYCache cacheWithName:@"mydb"];
    [cache setObject:@"hans" forKey:@"name"];

    在其他控制器用, 其实取的是硬盘里的数据:
    YYCache *cache = [YYCache cacheWithName:@"mydb"];
    NSLog(@"%@", [cache valueForKey:@"name"]);

    DoubleShawn:@汉斯哈哈哈 额,我好像理解了。我复述一下,您看我的想法对不对。YYMemoryCache 这个缓存,生成实例变量后,依赖在VC中,VC释放的时候,这个Cache随之释放。。(我以前的想法是:YYMemoryCache生成的对象的生命周期是第一次调用到程序关闭,然后不管从什么地方调用,存储和获取的空间是同一个。)不知道哪一种对的。。如果是以前的想法,理解起来就很容易,我缓存了一张图片,我pop再push以后,这张图片不需要网络请求,就会出现;但是如果用第一种“VC释放的时候,这个Cache随之释放”这种思维去想的话。。就怎么都想不通。
    汉斯哈哈哈:@DoubleShawn 你理解错了,YYMemoryCache只是缓存在内存里,不同实例不同存储空间。要明白亮点:1.在a方法里用YYMemoryCacheA存一个字符串"hans",如果YYMemoryCacheA是局部变量的话,那么程序过了a方法,YYMemoryCacheA就会被内存回收,存的字符串"hans"当然也就不在了 2.同样在a方法里用YYMemoryCacheA,YYMemoryCacheB都存一个字符串"hans",那么就算删除了YYMemoryCacheA的字符串“hans”,但也不影响存在YYMemoryCacheB字符串"hans",因为YYMemoryCacheA、YYMemoryCacheB是在不同内存区, 存的值当然也在不同链表里(dict)。
  • 海洋生物:你好!我刚学习ios几个月,可能下面问得问题很小白,请不要笑话。刚刚拜读了你的关于YYCache的简书,有些地方比较疑惑。比如removeNode这个方法中没有返回,那为什么在removeTailNode的方法中要返回一个_YYLinkedMapNode呢?如果不返回不可以吗?不返回也就不需要后面的几个方法中的if分支了。
    if (holder.count) {
    dispatch_queue_t queue = _lru->_releaseOnMainThread ? dispatch_get_main_queue() : YYMemoryCacheGetReleaseQueue();
    dispatch_async(queue, ^{
    [holder count]; // release in queue
    });
    汉斯哈哈哈:@海洋生物 holder 持有了待释放的对象,这些对象应该根据配置在不同线程进行释放(release)。此处 holder 被 block 持有,然后在另外的 queue 中释放。[holder count] 只是为了让 holder 被 block 捕获,保证编译器不会优化掉这个操作,所以随便调用了一个方法。
  • 975eb7a87350:请问图是用什么软件画的
    975eb7a87350:@汉斯哈哈哈 谢谢!
    汉斯哈哈哈:@蓝屋2196604044 Keynote
  • 孔凡伍:NSMutableArray *holder = [NSMutableArray new];
    .....
    if (holder.count) {
    dispatch_queue_t queue = _lru->_releaseOnMainThread ? dispatch_get_main_queue() : YYMemoryCacheGetReleaseQueue();
    dispatch_async(queue, ^{
    [holder count]; // release in queue
    });
    }
    这又是啥意思呢。求大神指点。
    kakukeme:@汉斯哈哈哈 指定的NSThread hold 住node,那[holder count]没干什么事吗;那要是主线程MainThread hold住node,再什么时候释放呢;
    孔凡伍:@汉斯哈哈哈 谢谢!
    汉斯哈哈哈:@孔凡伍 这段代码我的理解是:block对node引用,为了hold住node, 让node在指定的NSThread释放, 调用对象方法class并没干什么事。
  • 诸子百家谁的天下:谢谢大神分析,拜读!
    诸子百家谁的天下:@孔凡伍 我也不怎么懂呢,你问问博主吧?
    孔凡伍: [node class];
    这句啥意思。真心没懂。望指教
    汉斯哈哈哈:@诸子百家谁的天下 :smile:

本文标题:YYCache源码分析(二)

本文链接:https://www.haomeiwen.com/subject/gqusdttx.html