前言
提示:这篇文章主要是学习YYCache的缓存策略算法。我们在刷题的过程中会遇到相关的算法题,那就来看看在具体的工程项目中是如何使用的吧!
一、YYCache的来源
YYCache是大神郭曜源开源的一个内存缓存实现,目的是为了做数据的持久化。关于数据持久化的探讨,大家可以参考博客iOS数据持久化设计探讨(NSCache,PINCache,YYCache,CoreData,FMDB,WCDB,Realm). 这篇文章详细的介绍了为什么要做数据持久化,当前比较常见的数据持久化方案,也给出了很多非常有用的链接。
二、YYCache的结构
分为两部分:内存缓存(YYMemoryCache)和硬盘缓存(YYDiskCache):
1. YYMemoryCache
Notice:这部分参考的文章是简书作者 @汉斯哈哈哈 的文章: YYCache源码解析(二). YYMemoryCache使用的缓存策略:LRU+ Dictionary 是这篇文章的重点。我们来一一讲解。
1.1 最近最少使用—LRU(Least Frequently Used)
因为缓存(cache)相对于硬盘,它的特点是:容量小,存取速度快。所以当cache容量满的时候,我们就需要相应的策略算法决定哪些数据该放到cache里面。主要使用的策略算法有:先进先出—FIFO(First in first out);最近最少使用—LRU(Least Recently Used); 最不常用—LFU(Least Frequently Used); 多队列—MQ(Multi Queue)等。 在YYMemoryCache中使用的是LRU+Dictionary的方式来实现替换策略。如图所示:(图片来源) 双向链表的节点定义如下:
@interface _YYLinkedMapNode : NSObject {
@package
__unsafe_unretained _YYLinkedMapNode *_prev;
__unsafe_unretained _YYLinkedMapNode *_next;
id _key;
id _value;
NSUInteger _cost;
NSTimeInterval _time;
}
@end
整个链表的定义如下:
@interface _YYLinkedMap : NSObject {
@package
CFMutableDictionaryRef _dic;
NSUInteger _totalCost;
NSUInteger _totalCount;
_YYLinkedMapNode *_head;
_YYLinkedMapNode *_tail;
BOOL _releaseOnMainThread;
BOOL _releaseAsynchronously;
}
- (void)insertNodeAtHead:(_YYLinkedMapNode *)node;
- (void)bringNodeToHead:(_YYLinkedMapNode *)node;
- (void)removeNode:(_YYLinkedMapNode *)node;
- (_YYLinkedMapNode *)removeTailNode;
- (void)removeAll;
@end
从以上的源代码和结构图可以得知YYMemoryCache中双向链表的结构就如图所示。
1.2 基于LRU的增删改查
对于数据的处理无非就是增删改查四种操作,那么这四种操作在YYMemoryCache中是如何实现的呢? YYMemoryCache的增删改查的函数定义如下:
- (BOOL)containsObjectForKey:(id)key;
- (nullable id)objectForKey:(id)key;
- (void)setObject:(nullable id)object forKey:(id)key;
- (void)setObject:(nullable id)object forKey:(id)key withCost:(NSUInteger)cost;
- (void)removeObjectForKey:(id)key;
- (void)removeAllObjects;
这些是YYMemoryCache中增删改查的函数定义,之前也说过具体的实现是双向链表+哈希表实现的,所以我们先来看看双向链表中的增删改查操作是如何进行的。
1.2.1 增加数据
增加数据也就是插入一个新的双向链表节点,因为采用的是LRU算法,所以新增数据肯定是插入到头节点的位置,节点按照使用时间排序。这里需要注意的是:很多人在实现链表的时候会定义一个哨兵节点,也就是放在第一的位置,这样能避免单独考虑一些特殊情况,但是在_YYLinkedMap当中,是没有这个哨兵节点的,所以源代码如下:
- (void)insertNodeAtHead:(_YYLinkedMapNode *)node {
CFDictionarySetValue(_dic, (__bridge const void *)(node->_key), (__bridge const void *)(node));
_totalCost += node->_cost;
_totalCount++;
if (_head) {
node->_next = _head;
_head->_prev = node;
_head = node;
} else {
_head = _tail = node;
}
}
图解(来源同上):
1.2.2 删除数据
当需要缓存新的数据,但是缓存又是满的时候,根据LRU算法需要删除节点。因为LRU是最近最少使用,所以最后一个节点应该是需要删除的节点。 源代码如下:
- (_YYLinkedMapNode *)removeTailNode {
if (!_tail) return nil;
_YYLinkedMapNode *tail = _tail;
CFDictionaryRemoveValue(_dic, (__bridge const void *)(_tail->_key));
_totalCost -= _tail->_cost;
_totalCount--;
if (_head == _tail) {
_head = _tail = nil;
} else {
_tail = _tail->_prev;
_tail->_next = nil;
}
return tail;
}
还有一种情况就是需要清空缓存,这个时候就需要删除所有的节点,源代码如下:
- (void)removeAll {
_totalCost = 0;
_totalCount = 0;
_head = nil;
_tail = nil;
if (CFDictionaryGetCount(_dic) > 0) {
CFMutableDictionaryRef holder = _dic;
_dic = CFDictionaryCreateMutable(CFAllocatorGetDefault(), 0, &kCFTypeDictionaryKeyCallBacks, &kCFTypeDictionaryValueCallBacks);
if (_releaseAsynchronously) {
dispatch_queue_t queue = _releaseOnMainThread ? dispatch_get_main_queue() : YYMemoryCacheGetReleaseQueue();
dispatch_async(queue, ^{
CFRelease(holder);
});
} else if (_releaseOnMainThread && !pthread_main_np()) {
dispatch_async(dispatch_get_main_queue(), ^{
CFRelease(holder);
});
} else {
CFRelease(holder);
}
}
}
1.2.3 查找修改数据
当cache中的某个节点的数据被使用的时候,根据LRU算法策略,需要将其修改移动到头节点的位置。 修改数据的源代码如下:
- (void)bringNodeToHead:(_YYLinkedMapNode *)node {
if (_head == node) return;
if (_tail == node) {
_tail = node->_prev;
_tail->_next = nil;
} else {
node->_next->_prev = node->_prev;
node->_prev->_next = node->_next;
}
node->_next = _head;
node->_prev = nil;
_head->_prev = node;
_head = node;
}
1.2.4 YYMemoryCache的增删改查
- (id)objectForKey:(id)key {
if (!key) return nil;
pthread_mutex_lock(&_lock);
_YYLinkedMapNode *node = CFDictionaryGetValue(_lru->_dic, (__bridge const void *)(key));
if (node) {
node->_time = CACurrentMediaTime();
[_lru bringNodeToHead:node];
}
pthread_mutex_unlock(&_lock);
return node ? node->_value : nil;
}
- (void)setObject:(id)object forKey:(id)key withCost:(NSUInteger)cost {
if (!key) return;
if (!object) {
[self removeObjectForKey:key];
return;
}
pthread_mutex_lock(&_lock);
_YYLinkedMapNode *node = CFDictionaryGetValue(_lru->_dic, (__bridge const void *)(key));
NSTimeInterval now = CACurrentMediaTime();
if (node) {
_lru->_totalCost -= node->_cost;
_lru->_totalCost += cost;
node->_cost = cost;
node->_time = now;
node->_value = object;
[_lru bringNodeToHead:node];
} else {
node = [_YYLinkedMapNode new];
node->_cost = cost;
node->_time = now;
node->_key = key;
node->_value = object;
[_lru insertNodeAtHead:node];
}
if (_lru->_totalCost > _costLimit) {
dispatch_async(_queue, ^{
[self trimToCost:_costLimit];
});
}
if (_lru->_totalCount > _countLimit) {
_YYLinkedMapNode *node = [_lru removeTailNode];
if (_lru->_releaseAsynchronously) {
dispatch_queue_t queue = _lru->_releaseOnMainThread ? dispatch_get_main_queue() : YYMemoryCacheGetReleaseQueue();
dispatch_async(queue, ^{
[node class];
});
} else if (_lru->_releaseOnMainThread && !pthread_main_np()) {
dispatch_async(dispatch_get_main_queue(), ^{
[node class];
});
}
}
pthread_mutex_unlock(&_lock);
}
2.YYDiskCache
YYDiskCache采用的是SQLite 配合文件的存储方式,在存取小数据 (NSNumber) 时,YYDiskCache 的性能远远高出基于文件存储的库;而较大数据的存取性能则比较接近了。但得益于 SQLite 存储的元数据,YYDiskCache 实现了 LRU 淘汰算法、更快的数据统计,更多的容量控制选项。LRU算法在之前也说过了,就不细说了。 不一样的点在于YYDiskCache并不是使用双向链表实现的LRU算法,而且很多的增删改查操作都是基于数据库的。我还没来得及看YYDiskCache中LRU算法的具体实现是什么,在哪儿,希望有知道的小伙伴可以一起讨论
总结
以上就是对于YYCache的缓存策略的学习啦,有不对的地方,希望大家指出来。
参考文章
- YYCache阅读总结
- 深入理解YYCache
- iOS数据持久化设计探讨(NSCache,PINCache,YYCache,CoreData,FMDB,WCDB,Realm)
- iOS缓存框架YYCache的学习
- YYCache源码解析(二)
|