并不是只有 Redis 才可以做缓存
点击上方蓝色字体,选择“设置星标”
优质文章,第一时间送达
背景
当前业务需要使用 Oauth
授权的 accessToken
调用第三方系统获取用户资料。这里简化说明完成和第三方系统的对接需要两个接口。
通过
appkey
获取accessToken
。accessToken
2 小时过期,接口有quota
限制。使用
accessToken
获取用户信息,这个token
是通用的,只要是当前appkey
下面的用户都可以使用。
设计
考虑到有
quota
限制问题,所以一定要有缓存机制,不然获取用户信息的接口请求量大的时候quota
就不够用。accessToken
有两个小时过期问题,所有缓存要有失效机制。一个
appkey
有且只有一个accessToken
,并且不常变,可以考虑直接使用内存缓存。如果使用 Redis等分布式缓存系统,也会因为频繁网络请求。
下面的表格来源于 Jeff Dean的一个PPT,里面罗列了不同级别的IO时间,这正是我们评估如何设计系统的必要因素。
L1 cache reference | 0.5 ns | |
Branch mispredict | 5 ns | |
L2 cache reference | 7 ns | |
Mutex lock/unlock | 100 ns | |
Main memory reference | 100 ns | |
Compress 1K bytes with Zippy | 10,000 ns | 0.01 ms |
Send 1K bytes over 1 Gbps network | 10,000 ns | 0.01 ms |
Read 1 MB sequentially from memory | 250,000 ns | 0.25 ms |
Round trip within same datacenter | 500,000 ns | 0.5 ms |
Disk seek | 10,000,000 ns | 10 ms |
Read 1 MB sequentially from network | 10,000,000 ns | 10 ms |
Read 1 MB sequentially from disk | 30,000,000 ns | 30 ms |
Send packet CA->Netherlands->CA | 150,000,000 ns | 150 ms |
由上面表格,我们可以清楚的看出从网络上面获取1M数据和从内存中读取1M数据的差别。为什么说到这里呢,因为随着我们的用户的增加,集群的扩展,很少的情况下是把缓存数据库或者其他缓存中间件和应用程序放在一台服务器上,大部分情况都是分布式的应用系统和缓存系统,所以避免不了的我们需要考虑网络而的开销。
回到当前话题,对于一个 accessToken
占用内存足够小,即便是分布式系统每一个系统中都存储一个也不为过,只是能解决过期更新问题就好了。
实现
正好 Guava
就提供了这个功能, GuavaCache
缓存类似于 ConcurrentMap
,但不完全相同。最根本的区别是, ConcurrentMap
会持续添加到其中的所有元素,如果你不手动删除它们会一直存在。然而 GuavaCache
可以通过缓存的大小,过期时间,或者其他策略自动地移除元素,来限制其内存占用。
引入依赖
<dependency><groupId>com.google.guava</groupId><artifactId>guava</artifactId><version>19.0</version>
</dependency>
编写实现类
public class UserInfoProvider {public static void main(String[] args) {for (int i =0;i<100;i++) {String accessToken = new AccessTokenProvider().getAccessToken();System.out.println(accessToken);try {Thread.sleep(1000L);} catch (InterruptedException e) {e.printStackTrace();}}}
}
class AccessTokenProvider {private final static String KEY = "key";static Cache<String, Optional<String>> cache = CacheBuilder.newBuilder().expireAfterWrite(3, TimeUnit.SECONDS).removalListener(new RemovalListener<String, Optional<String>>() {@Overridepublic void onRemoval(RemovalNotification<String, Optional<String>> notification) {System.out.println("cache expired, remove key : " + notification.getKey());}}).build();public String getAccessToken() {try {Optional<String> stringOptional = cache.get(KEY, new Callable<Optional<String>>() {@Overridepublic Optional<String> call() throws Exception {return Optional.of(getRemoteAccessToken());}});return stringOptional.or("");} catch (ExecutionException e) {return null;}}private String getRemoteAccessToken() {return "accessToken:" + new Random().nextInt(1000);}
}
简单对上面逻辑进行讲解
getRemoteAccessToken
是模拟远程获取 tokengetAccessToken
是先从 cache 中获取,如果没有获取到,从远程获取。expireAfterWrite(3,TimeUnit.SECONDS)
是3秒过期,这是为了测试。removalListener
监听过期。UserInfoProvider
,sleep 3秒看一下更新情况。
由下面日志可见执行情况
accessToken:651
accessToken:651
accessToken:651
cache expired, remove key : key
accessToken:639
accessToken:639
accessToken:639
cache expired, remove key : key
accessToken:850
accessToken:850
accessToken:850
我们使用的还只是 GuavaCache
的冰山一角,它可以支容量和时间多种策略配置回收策略,同时它是良好的 LRU
实现。如上场景比较简单,如果你考虑缓存其他需求,需要考虑 refreshAfterWrite
和 maximumSize
等配合使用,避免缓存击穿和性能问题。
原理
GuavaCache
的设计和 ConcurrentHashMap
非常类似,使用多个 segments 方式的细粒度锁,在保证线程安全的同时,支持高并发场景需求。看过 ConcurrentHashMap
实现原理的朋友跟进代码一看了然。当然它的设计更复杂一些,跟进代码的话也比较简单,在 get
的时候他会根据不同的策略进行比对是否过期,如果过期再进行相应的通知操作。同时他巧妙的使用的 WeakReference
,这样可以利用 GC
来做删除数据的通知。
推荐阅读
你亲手写的代码,正在出卖你
深夜,聊聊架构设计
深夜,分享一个Git小技巧
编程·思维·职场
欢迎扫码关注
并不是只有 Redis 才可以做缓存相关推荐
- 常见面试题------Redis为什么可以做缓存?
Redis为什么可以做缓存? 1.Redis将其数据库完全保存在内存中,仅使用磁盘进行持久化.与其它键值数据存储相比,Redis有一组相对丰富的数据类型.Redis可以将数据复制到任意数量的从机中. ...
- 搭建redis给mysql做缓存
安装redis的前提是lnmp或者lamp的环境已经搭建完成. 安装redis 1.安装redis(或可以选择yum安装) 1 2 3 4 5 6 7 8 9 10 11 12 [root@redis ...
- Redis是如何做缓存的
前言 基于Redis的高性能特性,我们将Redis用在缓存场景非常广泛.使用起来方便,响应也是远超关系型数据库. 但我们用Redis做缓存时,也要注意各种问题的应对和措施,比如缓存失效.数据一致性问题 ...
- java 缓存分页_基于redis做缓存分页
在实际业务中我们会将一些热数据缓存到redis里面,这时候数据量比较大的话,我们就要对这些热数据进行分页,分页的方式有2种: 第一:从redis拿出所有数据后,再做内存分页(不推荐),热点数据小的时候 ...
- 9.redis 做缓存
全网最新相关内容 标题-链接 发布日期 简介 来源 轻松理解redis做缓存的流程_小浩丶的博客-CSDN博客_redis ... 2022-4-5 22:59:03 1. 引言 缓存有啥用?降低对数 ...
- SpringBoot集成Shiro前后端分离使用redis做缓存
文章目录 一 .shiro介绍 1.基础介绍 2.基本功能点 3.基本流程图 二. 常用的权限管理表关系 2.1. 表组成 2.2. 表结构 三.实战案例 3.1. 案例介绍 3.2. 依赖 3.3. ...
- 22-08-06 西安 尚医通(03)EasyExcel; Spring Cache 、Redis做缓存
EasyExcel EasyExcel:一行一行读取到内存 EasyExcel是阿里巴巴开源的一个excel处理框架,以使用简单.节省内存著称 POI:java里操作excel,读取.创建excel ...
- redis夺命连环问10--说说Redis是怎么做旁路缓存的?
目录 相关前置知识文章 说说Redis是怎么做旁路缓存的? 先谈缓存大概怎么做 再谈旁路缓存两种模式 redis和mysql如何保证数据一致性? 那怎么解决缓存和数据库的数据不一致问题? 如何保证缓存 ...
- 如果redis哨兵宕机了怎么办_Spring集成Redis做缓存,Redis宕机时Spring处理的问题
采用的是Spring自带的缓存管理,使用Redis做缓存,在Spring中配置如下 @Configuration @EnableCaching public class CachingConfig { ...
最新文章
- 天天在用Stream,那你知道如此强大的Stream的实现原理吗?
- Pytorch转TensorRT范例代码
- 项目托管 网站 小记
- php百度人脸识别做登陆,php调用百度人脸识别接口查询数据库人脸信息实现验证登录功能...
- 传江民总裁王江民因心脏病突发逝世 享年59岁
- mysql 判断字段为null表示 false 其它为true_日拱一卒,MySQL数据库 常用SQL优化技巧 十一式...
- 国家开放大学2021春1009离散数学(本)题目
- 容器编排技术 -- kubectl Cheat Sheet
- php 正则匹配 文件,php – 正则表达式匹配.htaccess中的一系列文件类型
- idea 配置 maven 和 镜像
- 语音信号处理 | 傅里叶变换、短时傅里叶变换、小波变换、希尔伯特变换、希尔伯特黄变换
- 查看文件的MD5 值
- 什么是POE交换机?POE交换机的作用
- [转载]2016美国数学建模MCM F题(政策)翻译:难民移入政策建模
- Javascript MS题蓄力:
- Java制作PDF转图片小工具
- form表单的action属性设置相对路径
- 【Algorithms公开课学习笔记3】 栈与队列
- 人不可貌象、小三不可斗量
- 晕菜~~~竟然出了这样的事情~~
热门文章
- matlab 拉格朗日插值法
- java基础语法--面向过程
- JS奇淫技巧:挑战前端黑科技,数值的七种写法,能全看懂的一定是高手
- Spark报错:Error:scalac: Scala compiler JARs not found (module ‘Spark_two‘): C:\Users\沫小新\.m2\repo
- 达到什么标准就可以上线了?
- 一个有趣的TimesTen大数据案例-美国邮政
- Angular中优雅的处理RxJs自动取消订阅的方式以免出现内存泄露以及多次调用的问题
- 招投标小程序开发功能及源码
- 求5个整数的平均值用c语言,编写求一组整数的和与平均值的程序
- Black Hat Europe 2021议题解读:Wi-Fi Mesh中的安全攻击面