如何做自助网站,怎么看网站有没有收录,外贸流程全步骤英文,wordpress书画#x1f44f;作者简介#xff1a;大家好#xff0c;我是爱发博客的嗯哼#xff0c;爱好Java的小菜鸟 #x1f525;如果感觉博主的文章还不错的话#xff0c;请#x1f44d;三连支持#x1f44d;一下博主哦 #x1f4dd;社区论坛#xff1a;希望大家能加入社区共同进步… 作者简介大家好我是爱发博客的嗯哼爱好Java的小菜鸟 如果感觉博主的文章还不错的话请三连支持一下博主哦 社区论坛希望大家能加入社区共同进步 个人博客智慧笔记 系列专栏Redis 文章目录 前言一、问题前引二、缓存穿透1. 问题描述2. 问题解决2.1 缓存空数据2.2 布隆过滤器 三、缓存击穿1. 问题描述2. 问题解决2.1 设置逻辑过期2.2 设置互斥锁 四、缓存雪崩1. 问题描述2. 问题解决2.1 设置随机过期时间2.2 缓存高可用 总结结语 前言
一聊到redis必不可少的就是缓存三兄弟的问题即缓存穿透、缓存击穿和缓存雪崩这三个问题在业务场景中相对来说比较常见的也是比较基础的三种问题。那么这三种问题是如何引起的并且应该如何解决就是本章探讨的话题。 一、问题前引
大家都知道Redis一般搭配MySQL来使用来充当缓存处理一些业务数据。但为什么要Redis用来充当缓存呢不能直接使用MySQL吗
当然是可以的但是对于一些请求量大并发次数高的场景就有问题了。
MySQL是基于磁盘的请求查询速度偏慢所以就需要一个基于内存的速度快的工具来缓存这些数据Redis就应运而生了。而且当大量请求到来时只有MySQL的话有可能承受不住大量请求导致MySQL宕机此时就会影响到整个服务器所以Redis此时又充当了一个保护缓冲的作用。
二、缓存穿透
1. 问题描述
缓存穿透主要体现在穿透两个字上穿透即为穿过缓存打到数据库上。
当一个请求访问的时候此时Redis没有缓存该数据然后去数据库查询该数据也查询到说明没有该数据。
此时你或许还不以为然不就一个空数据吗多稀罕啊。
但如果该请求是恶意请求此时无数条请求同时访问缓存中没有全部都会打在数据库上刚好还是类似于
select * from table where name 李白表中有1000万条数据name字段也没有创建索引。这时候问题是不是就大了服务器稍微差一点就会直接宕机。
这时你或许该问了那该如何解决呢不要急机智的程序猿肯定有应对之法。
2. 问题解决
2.1 缓存空数据
如果此时将请求的数据缓存起来是不是就可以避免请求打到数据库了
你现在或许又要问了空数据怎么缓存呢没错就是缓存空数据。
如果请求的数据查询数据为空的话就将该数据为空值缓存到Redis中以后每次请求都直接访问Redis查询到该数据直接返回空值。这样就避免恶意请求全部打到数据库了。
2.2 布隆过滤器 不了解布隆过滤器的同学可以看这篇文章硬核 | Redis 布隆Bloom Filter过滤器原理与实战 布隆过滤器 (Bloom Filter)是由 Burton Howard Bloom 于 1970 年提出它是一种 space efficient 的概率型数据结构用于判断一个元素是否在集合中。
当布隆过滤器说某个数据存在时这个数据可能不存在当布隆过滤器说某个数据不存在时那么这个数据一定不存在。
哈希表也能用于判断元素是否在集合中但是布隆过滤器只需要哈希表的 1/8 或 1/4 的空间复杂度就能完成同样的问题。
布隆过滤器可以插入元素但不可以删除已有元素。
其中的元素越多false positive rate(误报率)越大但是 false negative (漏报)是不可能的。 布隆过滤器原理
BloomFilter 的算法是首先分配一块内存空间做 bit 数组数组的 bit 位初始值全部设为 0。
加入元素时采用 k 个相互独立的 Hash 函数计算然后将元素 Hash 映射的 K 个位置全部设置为 1。
检测 key 是否存在仍然用这 k 个 Hash 函数计算出 k 个位置如果位置全部为 1则表明 key 存在否则不存在。
如下图所示
三、缓存击穿
1. 问题描述
缓存击穿一般常见于电商场景在双十一和六一八这种大促活动中缓存中会缓存一些热点数据随时都有大量的请求访问这个数据。
当某个时刻这个数据突然过期大量请求就会集中打到MySQL数据库中。 如何解决这个问题呢 2. 问题解决
该问题导致的原因是因为该缓存数据过期了但却有大量请求访问该数据
有两条思路去解决 不让该数据过期不让大量请求访问数据库
2.1 设置逻辑过期
热点数据随时都会有变化不设置过期时间的话会导致更多问题不能因此失彼。
但可以换一个思路在数据过期时无缝衔接一个新数据在请求看来这就是没有过期时间的一个数据。 此时如果大量请求访问该数据刚好该数据缓存逻辑过期但没有设置物理过期时间所以数据并不会被redis清除。
此时由业务代码去判断该缓存是否过期如果过期则获取互斥锁新建一个子线程去访问数据库重新设置缓存主线程返回过期数据没有获取互斥锁的都返回过期数据。
完整代码如下 //逻辑过期public Shop queryWithLogicalExpire(Long id) {String key CACHE_SHOP_KEY id;//1.从redis查询商铺缓存String shopJson stringRedisTemplate.opsForValue().get(key);//2.判断是否存在if (StrUtil.isBlank(shopJson)) {//3.未命中return null;}//4.命中需要先把json反序列化为对象RedisData redisData JSONUtil.toBean(shopJson, RedisData.class);Shop shop (Shop) redisData.getData();LocalDateTime expireTime redisData.getExpireTime();//5.判断是否过期if (expireTime.isAfter(LocalDateTime.now())) {//5.1还未过期return shop;}//5.2已经过期需要缓存重建//6.缓存重建//6.1获取互斥锁String lockKey LOCK_SHOP_KEY id;boolean isLock tryLock(lockKey);//6.2判断是否获取锁成功if (isLock) {// 6.3成功开启独立线程实现缓存重建CACHE_REBUILD_EXECUTOR.submit(() - {try {//重建缓存this.saveShop2Redis(id, 20L);} catch (Exception e) {e.printStackTrace();} finally {//释放锁unlock(lockKey);}});}//6.4返回过期的店铺信息//7.返回return shop;}
2.2 设置互斥锁
怎么才能不让大量数据去访问数据库呢
或许大家已经想到了上面设置逻辑过期用到过的一个功能互斥锁。 请求首先访问缓存如果命中的话直接返回该数据。
如果未命中的话则去获取互斥锁获取成功则查询数据库重新设置缓存获取失败则重试获取缓存数据。
完整代码如下
/*** 通过互斥锁机制查询商铺信息* param key*/private Shop queryShopWithMutex(String key, String cityCode) {Shop shop null;// 1.查询缓存String shopJson stringRedisTemplate.opsForValue().get(key);// 2.判断缓存是否有数据if (StringUtils.isNotBlank(shopJson)) {// 3.有,则返回shop JSONObject.parseObject(shopJson, Shop.class);return shop;}// 4.无,则获取互斥锁String lockKey RedisConstants.LOCK_SHOP_KEY shopCode;Boolean isLock tryLock(lockKey);// 5.判断获取锁是否成功try {if (!isLock) {// 6.获取失败, 休眠并重试Thread.sleep(100);return queryShopWithMutex(key, shopCode);}// 7.获取成功, 查询数据库shop baseMapper.getByCode(shopCode);// 8.判断数据库是否有数据if (shop null) {// 9.无,则将空数据写入redisstringRedisTemplate.opsForValue().set(key, , RedisConstants.CACHE_NULL_TTL, TimeUnit.MINUTES);return null;}// 10.有,则将数据写入redisstringRedisTemplate.opsForValue().set(key, JSONObject.toJSONString(shop), RedisConstants.CACHE_SHOP_TTL, TimeUnit.MINUTES);} catch (Exception e) {throw new RuntimeException(e);} finally {// 11.释放锁unLock(lockKey);}// 12.返回数据return shop;}关于两种方案各有各的优缺点 逻辑过期 及时性高但数据不是最新数据适合最终一致性的业务互斥锁 一致性高但会有数据延迟适合强一致性的业务 四、缓存雪崩
1. 问题描述
缓存雪崩可以简单的理解为大范围的缓存击穿。
有两个可能引起缓存雪崩问题
有大量的热门缓存同时失效。会导致大量的请求访问数据库。而数据库很有可能因为扛不住压力而直接挂掉。缓存服务器down机了可能是机器硬件问题或者机房网络问题。造成了整个缓存的不可用。 