莫张周刘王 发表于 2025-4-6 00:56:01

什么是缓存穿透、缓存雪崩、缓存击穿?

 什么是缓存?

缓存就是数据互换的缓冲区,是存贮数据的暂时地方,一样平常读写性能较高。
怎么防止缓存穿透?

缓存穿透是指客户端哀求的数据在缓存中和数据库中都不存在,这样缓存永久不会生效,这些哀求都会打到数据库,给数据库带来巨大压力。
常见的办理方案有两种:
缓存空对象
客户端第一次哀求是,发现数据库中数据不存在,在缓存中设置该值为空串,后面的哀求中若发现缓存中存储的值为空串直接返回空串,不在查询数据库。(缓存须要设置肯定时间内过期,防止数据库中有数据后缓存仍旧为空。或者在插入数据时,清空缓存)


[*]        长处:实现简单,维护方便
[*]        缺点:额外的内存斲丧,可能造成短期的不一致
https://i-blog.csdnimg.cn/direct/163b1e428d8144a98b6e05525cfdc410.png
    /**
   * 设置空值解决缓存穿透
   */
    public Shop queryWithPassThrough(Long id){
      //先从redis查询商铺缓存,若存在,从redis中返回,否则查询数据库,存在写入redis,并返回
      String shopJson = stringRedisTemplate.opsForValue().get("cache:shop:" + id);
      if(StringUtils.isNotBlank(shopJson)){
            Shop shop = JSONUtil.toBean(shopJson, Shop.class);
            return shop;
      }
      //判断命中的是否为空,防止缓存穿透
      if(shopJson==null){ //若为null,说明redis中数据为空字符串,说明mysql数据库也没有数据
            return null;
      }
      //redis不存在,查询数据库
      Shop shop = getById(id);
      if(shop==null){
            //将空值写入redis
            stringRedisTemplate.opsForValue().set("cache:shop:"+id,"",30, TimeUnit.MINUTES);
            return null;
      }
      stringRedisTemplate.opsForValue().set("cache:shop:"+id,JSONUtil.toJsonStr(shop));
      return shop;
    }
布隆过滤


[*]     长处:内存占用较少,没有多余key
[*]     缺点:实现复杂、存在误判可能
其他方案:
        •增强id的复杂度,制止被推测id规律
        •做好数据的基础格式校验
        •加强用户权限校验
        •做好热点参数的限流
为什么会出现缓存雪崩?

缓存雪崩是指在同一时段大量的缓存key同时失效或者Redis服务宕机,导致大量哀求到达数据库,带来巨大压力。

办理方案:


[*]给不同的Key的TTL添加随机值
[*]使用Redis集群进步服务的可用性
[*]给缓存业务添加降级限流计谋
[*]给业务添加多级缓存
如何办理缓存击穿?

缓存击穿标题也叫热点Key标题,就是一个被高并发访问而且缓存重修业务较复杂的key突然失效了,无数的哀求访问会在瞬间给数据库带来巨大的冲击。
常见的办理方案有两种:
互斥锁
 在高并发情况下,当有一个线程得到锁访问数据库时,其他线程等待。假如业务A须要获取缓存A和缓存B,而业务B须要获取缓存B和缓存A。此时业务A已经获取了缓存A的锁正在等待缓存B,而业务B获取了缓存B的锁等待缓存A,就出现了互相称待的情况,产生死锁。
        长处:没有额外的内存斲丧,包管一致性,实现简单
        缺点:线程须要等待,性能受影响,可能有死锁风险
https://i-blog.csdnimg.cn/direct/1af4789f1afb40778da4a5afb33a4ec6.png
   /**
   * 在设置空值,已经解决缓存穿透的基础上,添加互斥锁解决缓存击穿
   */
    public Shop queryWithMutex (Long id){
      //先从redis查询商铺缓存,若存在,从redis中返回,否则查询数据库,存在写入redis,并返回
      String shopJson = stringRedisTemplate.opsForValue().get("cache:shop:" + id);
      if(StringUtils.isNotBlank(shopJson)){
            Shop shop = JSONUtil.toBean(shopJson, Shop.class);
            return shop;
      }
      //判断命中的是否为空,房子缓存穿透
      if(shopJson==null){ //部位null,说明redis中数据为空字符串,说明mysql数据库也没有数据
            return null;
      }
      //redis不存在,失效缓存重建
      //获取互斥锁,每个店铺创建一个锁
      String LockKey = "lock:shop:"+id;
      Shop shop = null;
      try {
            boolean isLock = tryLock(LockKey);
            //获取锁失败,休眠重试
            if(!isLock){
                Thread.sleep(50);
                return queryWithMutex(id);
            }
            //获取到锁,查询数据库
            shop = getById(id);
            if(shop==null){
                //将空值写入redis
                stringRedisTemplate.opsForValue().set("cache:shop:"+id,"",30, TimeUnit.MINUTES);
                return null;
            }
            stringRedisTemplate.opsForValue().set("cache:shop:"+id,JSONUtil.toJsonStr(shop));
      }catch (InterruptedException e){
            thrownew RuntimeException("系统异常");
      }finally {
            //释放锁
            unLock(LockKey);
      }
      return shop;
    }
    /**
   *获取锁
   */
    private boolean tryLock(String key){
      Boolean flag = stringRedisTemplate.opsForValue().setIfAbsent(key, "1", 10, TimeUnit.SECONDS);
      return BooleanUtil.isTrue(flag);
    }

    /**
   * 释放锁
   */
    private void unLock(String key){
      stringRedisTemplate.delete(key);
    }
逻辑过期:
        长处:线程无需等待,性能较好
        缺点:不包管一致性,有额外内存斲丧,实现复杂
https://i-blog.csdnimg.cn/direct/4610bfc7fff847d49de7447157c63329.png

//线程池
private static final ExecutorService CACHE_REBUILD_EXECUTOR = Executors.newFixedThreadPool(10);
    /**
   * 使用逻辑过期解决缓存击穿(实际上数据不会过期,故不需要考虑缓存穿透问题),使用时需要先缓存热点数据
   */
    public Shop queryWithLogicalExpire (Long id){
      //先从redis查询商铺缓存,若存在,从redis中返回,否则查询数据库,存在写入redis,并返回
      String shopJson = stringRedisTemplate.opsForValue().get("cache:shop:" + id);
      //缓存中不存在,直接返回null。(热点数据,通过一般需要自行初始化到redis缓存中,一般不会出现null的情况)
      if(StringUtils.isBlank(shopJson)){
            return null;
      }
      RedisData redisData = JSONUtil.toBean(shopJson, RedisData.class);
      Shop shop = JSONUtil.toBean((JSONObject) redisData.getData(), Shop.class);//获取缓存数据
      LocalDateTime expireTime = redisData.getExpireTime();//获取缓存过期时间
      //判断是否过期
      if(expireTime.isAfter(LocalDateTime.now())){
            //未过期,直接返回
            return shop;
      }
      //过期,需要缓存重建
      //获取互斥锁
      String LockKey = "lock:shop:"+id;
      if(tryLock(LockKey)){
            //获取锁成功,开启独立线程,实现缓存重建
            CACHE_REBUILD_EXECUTOR.submit(() ->{
                //重建缓存
                try{
                  this.saveShop2Redis(id,20L);
                }catch (Exception e){
                  throw new RuntimeException(e);
                }finally {
                  //释放锁
                  unLock(LockKey);
                }
            });
      }
      return shop;
    }
    public void saveShop2Redis(Long id,Long expireSeconds){
      //查询店铺数据
      Shop shop = getById(id);
      //封装逻辑过期时间
      RedisData redisData = new RedisData();
      redisData.setData(shop);
      redisData.setExpireTime(LocalDateTime.now().plusMinutes(expireSeconds));
      //写入redis
      stringRedisTemplate.opsForValue().set("cache:shop:"+id,JSONUtil.toJsonStr(redisData));
    }
    /**
   *获取锁
   */
    private boolean tryLock(String key){
      Boolean flag = stringRedisTemplate.opsForValue().setIfAbsent(key, "1", 10, TimeUnit.SECONDS);
      return BooleanUtil.isTrue(flag);
    }

    /**
   * 释放锁
   */
    private void unLock(String key){
      stringRedisTemplate.delete(key);
    }

全局ID天生器

假如使用数据库自增ID就存在一些标题:


[*]id的规律性太明显
[*]受单表数据量的限制
全局ID天生器,是一种在分布式体系下用来天生全局唯一ID的工具,一样平常要满足下列特性:
https://i-blog.csdnimg.cn/direct/7eccb1cc26754923baa7243750d32252.png
为了增加ID的安全性,我们可以不直接使用Redis自增的数值,而是拼接一些别的信息:

ID的构成部门:


[*]符号位:1bit,永久为0
[*]时间戳:31bit,以秒为单元,可以使用69年
[*]序列号:32bit,秒内的计数器,支持每秒产生2^32个不同ID

https://i-blog.csdnimg.cn/direct/76782f3cf63e44a7b4f3a09e1c8d1f33.png
Redis自增ID计谋:


[*]每天一个key,方便统计订单量
[*]ID构造是 时间戳 + 计数器
   import org.springframework.data.redis.core.StringRedisTemplate;
import org.springframework.stereotype.Component;

import java.time.LocalDateTime;
import java.time.ZoneOffset;
import java.time.format.DateTimeFormatter;

@Component
public class RedisIdWorker {
    private StringRedisTemplate stringRedisTemplate;

    public RedisIdWorker(StringRedisTemplate stringRedisTemplate) {
      this.stringRedisTemplate = stringRedisTemplate;
    }

    // 2022年开始时间戳
    private static final long BEGIN_TIMESTAMP = 1640995200L;
    // 序列号位数
    private static final int COUNT_BITS = 32;
    public long nextId(String KeyPrefix) {
      // 1.生成时间戳
      LocalDateTime now = LocalDateTime.now();
      long nowSecond = now.toEpochSecond(ZoneOffset.UTC);
      long timestamp = nowSecond-BEGIN_TIMESTAMP;

      // 2.生成序列号
      String date = now.format(DateTimeFormatter.ofPattern("yyyy:MM:dd"));
      //自增长,返回自增序列号,key不存在会自动创建一个key
      long count = stringRedisTemplate.opsForValue().increment("icr:" + KeyPrefix + ":" + date);
      // 3.拼接并返回
      // 时间戳左移32位,通过|运算,拼接序列号
      return timestamp << COUNT_BITS | count;
    }
}


免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
页: [1]
查看完整版本: 什么是缓存穿透、缓存雪崩、缓存击穿?