深知,源码还是一点点读,加点读书笔记,才可以深入挖掘,因此还是觉得每次读源码都记录一番,无论好坏,如有写错,请斧正

简介

YYCahce 是作为 ibireme 大神开源的一个YYkit组件库中的一部分,YYCache提供了内存缓存,和持久性的硬盘缓存。

一个合理缓存应该有的设计

  • 合理的增删改查接口
  • 高速缓存,提高常用缓存的返回性能和效率
  • 低速缓存,磁盘大文件缓存
  • 良好缓存限制策略
  • 高性能,线程安全

基本设计思路

YYCache 提供对外的整合接口,YYMemoryCache 提供内存存储缓存,通过lru算法进行处理,YYDiskCache提供file和sqlite3的两种持久化存储方式

YYMemoryCache

YYMemoryCahce 作为一个内存缓存,提供高速缓存,并且因为内存有限,需要进行一定的限制

  1. 线程安全

    在频率高的并发数据操作中,必须保证线程安全,不然拿到的数据不符合预期,或者导致读写冲突 在YYMemoryCache中,采用的pthread_mutex加锁

    pthread_mutex 定义了一组跨平台的线程相关的 API,pthread_mutex 表示互斥锁。互斥锁的实现原理与信号量非常相似,不是使用忙等,而是阻塞线程并睡眠,需要进行上下文切换。

     // 主要使用api  pthread_mutex_lock(&mutex); // 申请锁  // 临界区pthread_mutex_unlock(&mutex); // 释放锁
    复制代码

    pthread_mutex支持递归锁,递归锁,就是在内部加锁调用的时候,递归了自身,这样子,会导致死锁。

    • pthread_mutex则支持递归处理 attr PTHREAD_MUTEX_RECURSIVE

    • memory中使用pthread,在循环释放的时候,通过pthread_mutex_trylock实现简单的自旋锁

    原文:OSSpinLock 和 dispatch_semaphore 都不会产生特别明显的死锁,所以我也无法确定用 dispatch_semaphore 代替 OSSpinLock 是否正确。能够肯定的是,用 pthread_mutex 是安全的。

  2. LRU

最近使用优先,也就是认为,最近使用的,最大可能性会再次用到 里面实现用到一个双向链表的结构进行处理,使用到的就会被移动到表头 在删除释放的时候,就会从队尾进行删除释放

  1. 键值对存储操作

通过创建链表节点node,进行间接操作数据

#pragma mark - _YYLinkedMapNode
@interface _YYLinkedMapNode : NSObject {// 类似C中的private_extern,使用@private的话,限制太大,@package在类的镜像外进行引用就会报错// 使用@public @protect等的话,就没什么限制的// 目的是,限制在本文件中使用@package__unsafe_unretained _YYLinkedMapNode *_prev; // 通过dic进行持有__unsafe_unretained _YYLinkedMapNode *_next; // 通过dic进行持有id _key;id _value;NSUInteger _cost;NSTimeInterval _time;
}
@end
复制代码
  1. 限制策略
// 限制条件有3个,age cost count ,一般情况下默认都不做限制
/// 个数限制
@property NSUInteger countLimit;
/// 过期时间
@property NSTimeInterval ageLimit;
/// 存储消耗限制,setObject的时候时候把内存大小的存进去
@property NSUInteger costLimit;@property BOOL shouldRemoveAllObjectsWhenEnteringBackground; // 进入后台检查限制删除缓存,默认YES
@property BOOL shouldRemoveAllObjectsOnMemoryWarning; // 收到内存警告的时候复制代码

MemoryCache中使用的LRU的的算法进行删除缓存,当超过一定的限制的时候,会进行循环清理,也就是说,memory里面的东西并不是存进去就会在app的生命周期中一直存在的,可能会被释放掉。因此外部在使用的时候,需要判空处理的,如果为nil,则认为缓存已经失效,需要重新更新。

因此,YYMemoryCahce并不是数据在app的生命周期会被一直保留的,所以,在使用YYCahce最外层接口的时候,YYCache是会通过YYMemoryCache提供高速缓存,同时存入到低速缓存中。

获取的时候,YYMemoryCache获取不到,则会询问YYDiskCache。

  1. 某些小技巧,用于提供性能

会在一段时间,自行检查是否超过限制策略,超过则循环释放。 YYMemoryCache默认在进入后台的时候会进行检查。 因为一次释放太多,会导致资源消耗过大,因此,通过dispatch_aync block的方式,放到后台线程释放


YYDiskCache

  1. 线程安全

disk中使用dispatch_semaphore信号量进行处理

dispatch_semaphore 是信号量,但当信号总量设为 1 时也可以当作锁来。在没有等待情况出现时,它的性能比 pthread_mutex 还要高,但一旦有等待情况出现时,性能就会下降许多。相对于 OSSpinLock 来说,它的优势在于等待时不会消耗 CPU 资源。对磁盘缓存来说,它比较合适。

dispatch_semaphore是属于闲等待,CPU不会消耗,因此,在做磁盘缓存的时候,用时较长,需要等待的话,会比较节省资源

  • OSSpinLock 自旋锁,不安全,所以使用了dispatch_semaphore进行处理,因为大文件,需要等待的情况较多
  1. 大文件处理
  • YYKVStorage 通过key value的一个封装,实现增删改查

  • YYKVStorage 实现细节:

    • 提供对应的sqlite3的db增删改查的接口,在操作的过程都做了防御式的操作
    - (BOOL)_dbClose {// 关闭数据库if (!_db) {return YES;}int result = 0;BOOL retry = NO;BOOL stmtFinalized = NO;if (_dbStmtCache) {_dbStmtCache = NULL;}do {retry = NO;result = sqlite3_close(_db);if (result == SQLITE_BUSY || result == SQLITE_LOCKED) {// 如果sqlite被占用,那进行stmt的析构操作,让其释放资源// 在重新试一次if (!stmtFinalized) {stmtFinalized = YES; //析构sqlite3_stmt *stmt;// sqlite3_stmt 是一种辅助数据结构,用于操作二进制数据// 循环释放所有的sqlite stmtwhile ((stmt = sqlite3_next_stmt(_db, nil))) {sqlite3_finalize(stmt); //析构 所有的sqlite stmt的辅助retry = YES; // 然后重试,}}} else if (result != SQLITE_OK) {// 关闭失败// 输出 错误日志NSLog(@"关闭失败");}} while (retry);_db = NULL;return YES;}- (BOOL)_dbCheck {if (_db) {// 如果重试错误的次数小于限定次数,并且大于最小重试时间,则重新进行打开和初始化检查if (_dbOpenErrorCount < kMaxErrorRetryCount &&CACurrentMediaTime() - _dbLastOpenErrorTime > kMinRetryTimeInterval) {return [self _dbOpen] && [self _dbInitialize];} else {return NO;}}return YES; // 正常
    }
    复制代码
    • 对sqlite的stmt也做了缓存,加速其性能
     // 获取缓存中的stmt,用sql做key
    - (sqlite3_stmt *)_dbPrepareStmt:(NSString *)sql {if (![self _dbCheck] || sql.length == 0 || !_dbStmtCache) return NULL;sqlite3_stmt *stmt = (sqlite3_stmt *)CFDictionaryGetValue(_dbStmtCache, (__bridge const void *)(sql));if (!stmt) {// 如果stmt为空的话int result = sqlite3_prepare_v2(_db, sql.UTF8String, -1, &stmt, NULL);if (result != SQLITE_OK) {// 如果不成功NSLog(@"创建stmt失败");return NULL; // 返回空}CFDictionarySetValue(_dbStmtCache, sql.UTF8String, stmt); // 缓存起来,都是同一个stmt,每次创建的话,会大量消耗资源,因此这里做了缓存} else {sqlite3_reset(stmt);}return stmt;
    }
    复制代码
  • 存储方式有三个模式

    • 文件
    • sqlite3
    • 混合 // 混合的情况有个阈值,大于阈值,则存文件
  • db sqlite3的使用细节

    • sqlite3_stmt 操作数据的辅助数据接口,用于执行sql,并且返回结果
    • stmt 也进行做了缓存,因为这个sql会重复不定期使用
  • 优化: 可以升级最新版本的sqlite3,以此提高效率


YYCache

提供了增删改查的API,底下调用的YYMemoryCache和YYDiskCache,封装了一些基本逻辑。在save的时候,会保存到YYMemoryCache和YYDiskCache,读取的时候,会优先读取YYMemoryCache实现高速缓存,再读取低速缓存。

参考

实际上在看的时候,下面这位大佬写得更加清晰的,之所以我按自己的理解再写一次,也是为了让自己更好的研究,根据所有学习技巧来说,最重要的还是应用,因此有了这篇文章,希望之后能逐渐写出一些更好blog

从 YYCache 源码 Get 到如何设计一个优秀的缓存 - https://juejin.im/post/59f6e3b051882534af253d4a

ibireme blog - http://blog.ibireme.com/category/tec/ios-tec/

YYCache深入学习相关推荐

  1. iOS 缓存框架YYCache学习

    文章目录 前言 一.YYCache的来源 二.YYCache的结构 1. YYMemoryCache 1.1 最近最少使用-LRU(Least Frequently Used) 1.2 基于LRU的增 ...

  2. YYCache 源码学习(一):YYMemoryCache

    其实最近是在重新熟练Swift的使用,我想出了一个比较实用的方法,那就是一边看OC的项目,看懂之后用Swift实现一遍.这样既学习了优秀的源码又练习了Swift,一举两得. 之前看过几篇文章是剖析YY ...

  3. YYCache 源码学习(二):YYDiskCache

    整体思路 从作者的<YYCache 设计思路>一文中可以看出,作者在设计YYDiskCache之前做了充分的测试:iPhone 6 64G 下,SQLite 写入性能比直接写文件要高,但读 ...

  4. ios学习 准备列表

    2019独角兽企业重金招聘Python工程师标准>>> Skip to content This repository Pull requests Issues Gist Watch ...

  5. 源码解析--YYCache

    前言:准备看下YY系列中的YYWebImage框架,发现该框架是使用YYCache来做缓存的.那就从缓存开始吧. 先奉上YYCache框架的地址以及作者的设计思路 学习YYCache框架你可以get到 ...

  6. 深入理解YYCache缓存策略

    文章目录 前言 几个主要成员类 1 YYCache 2 YYMemoryCache 3 YYDiskCache 实例化 1 实例方法 2 构造器方法 查 1 检查是否有缓存 2 读缓存 增 1 写内存 ...

  7. iOS缓存设计(YYCache思路)

    iOS缓存设计(YYCache思路) 前言: 前段时间业务有缓存需求,于是结合YYCache和业务需求,做了缓存层(内存&磁盘)+ 网络层的方案尝试 由于YYCache 采用了内存缓存和磁盘缓 ...

  8. 深入理解YYCache

    前言 本篇文章将带来YYCache的解读,YYCache支持内存和本地两种方式的数据存储.我们先抛出两个问题: YYCache是如何把数据写入内存之中的?又是如何实现的高效读取? YYCache采用了 ...

  9. iOS本地缓存方案之YYCache源码解析

    iOS持久化方案有哪些? 简单列举一下,iOS的本地缓存方案有挺多,各有各的适用场景: NSUserDefault : 系统提供的最简便的key-value本地存储方案,适合比较轻量的数据存储,比如一 ...

最新文章

  1. java datasource mysql_Java MysqlDataSource類代碼示例
  2. linux apache设置web访问重定向_从零开始学Linux运维|30.Linux的目录结构
  3. DPM2012系列之十三:如何清理无法联系的客户端代理
  4. 转:字符编码笔记:ASCII,Unicode 和 UTF-8
  5. 查看系统是否安装了ftp服务器上,linux查看是否安装了ftp服务器上
  6. 演练 玩游戏支付游戏币
  7. 知道硬盘很慢,但没想到比 CPU Cache 慢 10000000 倍!
  8. MongoDB数据库读书笔记
  9. 软件系统介绍文档模板
  10. python新浪微博爬虫_利用新浪API实现数据的抓取\微博数据爬取\微博爬虫
  11. linux中ll排序命令,ll命令
  12. iOS设备的CPU架构
  13. 服务器装win10系统很卡,笔记本电脑安装win10系统后变很卡很慢的解决方法
  14. 泰坦尼克号生存预测(多种模型实现)python
  15. CoordinatorLayout + AppBarLayout + CollapsingToolbarLayout
  16. PHP查询附近的人及其距离的实现方法
  17. 十折交叉验证pythoniris_python机器学习-交叉验证(cross-vaildation)
  18. BLDC反电动势的一些知识点
  19. continue / break 跳出指定层循环
  20. java non-heap_成都汇智动力-Java内存相关

热门文章

  1. 武汉理工大学c语言实验 编程解决鸡兔同笼问题,C语言程序设计实验指导
  2. 计算机组成原理手动在线模式,实验四计算机组成原理 运算器手动实验
  3. 孔雀东南飞用mysql存储_PowerDesigner使用建议(完整版) 用实体关系图进行数据库建模...
  4. linux中往sed命令,Linux中Sed命令怎么用?
  5. git add remote_收藏向 | Git命令与原理速查手册
  6. Visual C++下对匿名管道的编程实现
  7. conn.execute的用法
  8. Lockey的沙雕低错集锦(未完待续~自己提升用)
  9. 中文代码示例之5分钟入门TypeScript
  10. 解决Ubuntu“下载额外数据文件失败 ttf-mscorefonts-installer”的问题 (转载)