Redis（十六）缓存预热+缓存雪崩+缓存击穿+缓存穿透

文章目录

  • 面试题
  • 缓存预热
  • 缓存雪崩
    • 解决方案
  • 缓存穿透
    • 解决方案
  • 缓存击穿
    • 解决方案
    • 案例：高并发聚划算业务
  • 总结表格

面试题

  1. 缓存预热、雪崩、穿透、击穿分别是什么?你遇到过那几个情况?
  2. 缓存预热你是怎么做的?
  3. 如何避免或者减少缓存雪崩?
  4. 穿透和击穿有什么区别?他两是一个意思还是截然不同?
  5. 穿透和击穿你有什么解决方案?如何避免?
  6. 假如出现了缓存不一致，你有哪些修补方案?

缓存预热

@PostConstruct初始化数据

缓存雪崩

大量key同时过期

解决方案

  1. redis中key设置为永不过期 or 过期时间错开
  2. redis缓存集群实现高可用

主从+哨兵
Redis Cluster
开启Redis持久化机制aof/rdb，尽快恢复缓存集群

  1. 多缓存结合预防雪崩

ehcache本地缓存+redis缓存

  1. 服务降级

Hystrix或者阿里sentinel限流&降级

  1. 服务提供商

阿里云-云数据库Redis版

缓存穿透

先查redis无，后查mysql无，都查询不到该条记录，但是请求每次都会打到数据库上面去，导致后台数据库压力暴增

解决方案

  1. 空对象缓存或者缺省值

恶意攻击：不同key打入缓存，由于存在空对象缓存和缓存回写（看自己业务需求），redis中的无关紧要的key也会越写越多（设置缓存过期时间）

  1. Google布隆过滤器Guava解决（较为权威）

Guava’s BloomFilter源码

白名单案例
全部合法的key都需要放入Guava版布隆过滤器+redis里面，不然数据就是返回nul
在这里插入图片描述
POM

<!--guava Google 开源的 Guava 中自带的布隆过滤器-->
<dependency>
    <groupId>com.google.guava</groupId>
    <artifactId>guava</artifactId>
    <version>23.0</version>
</dependency>

YML

server.port=7777

spring.application.name=redis

# ========================logging=====================
logging.level.root=info
logging.level.com.atguigu.redis7=info
logging.pattern.console=%d{yyyy-MM-dd HH:mm:ss.SSS} [%thread] %-5level %logger- %msg%n 

logging.file.name=redis.log
logging.pattern.file=%d{yyyy-MM-dd HH:mm:ss.SSS} [%thread] %-5level %logger- %msg%n

# ========================swagger=====================
spring.swagger2.enabled=true
#在springboot2.6.X结合swagger2.9.X会提示documentationPluginsBootstrapper空指针异常，
#原因是在springboot2.6.X中将SpringMVC默认路径匹配策略从AntPathMatcher更改为PathPatternParser，
# 导致出错，解决办法是matching-strategy切换回之前ant_path_matcher
spring.mvc.pathmatch.matching-strategy=ant_path_matcher

# ========================redis单机=====================
spring.redis.database=0
# 修改为自己真实IP
spring.redis.host=192.168.1.129
spring.redis.port=6379
spring.redis.password=111111
spring.redis.lettuce.pool.max-active=8
spring.redis.lettuce.pool.max-wait=-1ms
spring.redis.lettuce.pool.max-idle=8
spring.redis.lettuce.pool.min-idle=0

# ========================alibaba.druid=====================
spring.datasource.type=com.alibaba.druid.pool.DruidDataSource
spring.datasource.driver-class-name=com.mysql.jdbc.Driver
spring.datasource.url=jdbc:mysql://localhost:3306/datatest?useUnicode=true&characterEncoding=utf-8&useSSL=false
spring.datasource.username=root
spring.datasource.password=111111
spring.datasource.druid.test-while-idle=false

# ========================mybatis===================
mybatis.mapper-locations=classpath:mapper/*.xml
mybatis.type-aliases-package=com.atguigu.redis7.entities

# ========================redis集群=====================
#spring.redis.password=111111
## 获取失败 最大重定向次数
#spring.redis.cluster.max-redirects=3
#spring.redis.lettuce.pool.max-active=8
#spring.redis.lettuce.pool.max-wait=-1ms
#spring.redis.lettuce.pool.max-idle=8
#spring.redis.lettuce.pool.min-idle=0
##支持集群拓扑动态感应刷新,自适应拓扑刷新是否使用所有可用的更新，默认false关闭
#spring.redis.lettuce.cluster.refresh.adaptive=true
##定时刷新
#spring.redis.lettuce.cluster.refresh.period=2000
#spring.redis.cluster.nodes=192.168.111.185:6381,192.168.111.185:6382,192.168.111.172:6383,192.168.111.172:6384,192.168.111.184:6385,192.168.111.184:6386

案例

@Test
public void testGuavaWithBloomFilter()
{
    //1 创建guava版布隆过滤器
    BloomFilter<Integer> bloomFilter = BloomFilter.create(Funnels.integerFunnel(), 100);

    //2 判断指定的元素是否存在
    System.out.println(bloomFilter.mightContain(1));
    System.out.println(bloomFilter.mightContain(2));

    System.out.println();

    //3 讲元素新增进入bloomfilter
    bloomFilter.put(1);
    bloomFilter.put(2);
    System.out.println(bloomFilter.mightContain(1));
    System.out.println(bloomFilter.mightContain(2));

}

在这里插入图片描述
黑名单案例
在这里插入图片描述

缓存击穿

大量的请求同时查询一个 key 时，此时这个key正好失效了，就会导致大量的请求都打到数据库上面去

解决方案

常见问题：热点key失效

在这里插入图片描述

  1. 差异失效时间，对于访问频繁的热点key，干脆就不设置过期时间
  2. 互斥跟新，采用双检加锁策略（多个线程同时去查询数据库的这条数据，那么我们可以在第一个查询数据的请求上使用一个 互斥锁来锁住它。其他的线程走到这一步拿不到锁就等着，等第一个线程查询到了数据，然后做缓存。后面的线程进来发现已经有缓存了，就直接走缓存）

案例：高并发聚划算业务

分析
问题：热点key突然失效导致缓存击穿

升级加固

  1. 双检加锁策略

多个线程同时去查询数据库的这条数据，在第一个查询数据的请求上使用一个互斥锁来锁住它。

其他的线程走到这一步拿不到锁就等着，等第一个线程查询到了数据，然后做缓存。后面的线程进来发现已经有缓存了，就直接走缓存。

  1. 差异失效时间
    在这里插入图片描述
// Controller method
@RequestMapping(value = "/pruduct/find",method = RequestMethod.GET)
@ApiOperation("聚划算案例，每次1页每页5条显示")
public List<Product> find(int page, int size) {
    List<Product> list=null;

    long start = (page - 1) * size;
    long end   = start + size - 1;

    try
    {
        // 采用redis list结构里面的lrang命令来实现加载和分页查询
        list = redisTemplate.opsForList().range(JHS_KEY,start,end);
        if(CollectionUtils.isEmpty(list))
        {
            //TODO 走mysql查询
        }
        log.info("参加活动的商家:{}",list);
    }catch (Exception e){
        // 出异常了，一般redis宕机了或者redis网络抖动导致timeout
        log.error("jhs exception:{}",e);
        e.printStackTrace();
        // ....再次查询mysql
    }
    return list;
}

// 模拟数据
@PostConstruct
public void initJHSAB(){
    log.info("启动AB定时器计划任务天猫聚划算功能模拟.........."+DateUtil.now());

    //1 用线程模拟定时任务，后台任务定时将mysql里面的参加活动的商品刷新到redis里
    new Thread(() -> {
        while (true)
        {
            //2 模拟从mysql查出数据，用于加载到redis并给聚划算页面显示
            List<Product> list = this.getProductsFromMysql();
            //3 先更新B缓存且让B缓存过期时间超过A缓存，如果A突然失效了还有B兜底，防止击穿
            redisTemplate.delete(JHS_KEY_B);
            redisTemplate.opsForList().leftPushAll(JHS_KEY_B,list);
            redisTemplate.expire(JHS_KEY_B,86410L,TimeUnit.SECONDS);
            //4 再更新A缓存
            redisTemplate.delete(JHS_KEY_A);
            redisTemplate.opsForList().leftPushAll(JHS_KEY_A,list);
            redisTemplate.expire(JHS_KEY_A,86400L,TimeUnit.SECONDS);

            //5 定时更新缓存，模拟聚划算一天执行的参加活动的品牌
            try { TimeUnit.MINUTES.sleep(1); } catch (InterruptedException e) { e.printStackTrace(); }
        }
    },"t1").start();

总结表格

在这里插入图片描述

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.mfbz.cn/a/407053.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

JDK下载安装

JDK下载安装

资源展示 安装说明 傻瓜式安装&#xff0c;下一步即可。建议&#xff1a;安装路径不要有中文或者空格等特殊符号。本套课程会同时安装JDK8 和 JDK17&#xff0c;并以JDK17为默认版本进行讲解。 安装步骤 &#xff08;1&#xff09;双击jdk-17_windows-x64_bin.exe文件&#…
阅读更多...
免费多域名证书，最多支持保护250个域名

免费多域名证书，最多支持保护250个域名

随着企业规模扩大和多元化发展&#xff0c;拥有多个域名的需求变得普遍&#xff0c;此时&#xff0c;多域名SSL证书应运而生&#xff0c;并且这一类型的证书已经发展到能够安全地支持多达250个不同域名的加密需求。 多域名SSL证书&#xff0c;也称为SAN&#xff08;Subject Alt…
阅读更多...
RocketMQ生产环境常见问题分析与总结

RocketMQ生产环境常见问题分析与总结

RocketMQ生产环境常见问题分析与总结 如何保证消息不丢失 消息丢失场景 对于跨网络的节点可能会丢消息&#xff0c;因为MQ存盘都会先写入OS的PageCache中&#xff0c;然后再让OS进行异步刷盘&#xff0c;如果缓存中的数据未及时写入硬盘就会导致消息丢失 生产端到Broker端Brok…
阅读更多...
Mybatis总结--传参二

Mybatis总结--传参二

#叫做占位符 Mybatis是封装的JDBC 增强版 内部还是用的jdbc 每遇到一个#号 这里就会变为&#xff1f;占位符 一个#{}就是对应一个问号 一个占位符 用这个对象执行sql语句没有sql注入的风险 八、多个参数-使用Param 当 Dao 接口方法有多个参数&#xff0c;需要通过名称使…
阅读更多...
获取图片的颜色的RGB

获取图片的颜色的RGB

shiftwins获取截图 然后打开画图软件&#xff0c;ctrlv 然后用吸管工具&#xff0c;吸取 然后编辑颜色&#xff0c;就有
阅读更多...
【群智能算法转让】一种新的群智能算法||一种超越隐喻的元启发算法||一种基于数学的群智能算法

【群智能算法转让】一种新的群智能算法||一种超越隐喻的元启发算法||一种基于数学的群智能算法

1、简介 本次全新出推出一个新的基于种群的元启发算法&#xff0c;基于数学中求解非线性方程组的基本思想而开发的&#xff0c;性能不错 新算法转让Q1 top级&#xff08;一种基于数学的超越隐喻的元启发式算法&#xff09; 新的群智能算法转让&#xff0c;新的元启发式算法转…
阅读更多...
NATS学习笔记（一）

NATS学习笔记（一）

NATS是什么&#xff1f; NATS是一个开源的、轻量级、高性能的消息传递系统&#xff0c;它基于发布/订阅模式&#xff0c;由Apcera公司开发和维护。 NATS的功能 发布/订阅&#xff1a;NATS的核心是一个发布/订阅消息传递系统&#xff0c;允许消息生产者发布消息到特定的主题…
阅读更多...
RAG中如何解决上下文知识连贯性问题 || 如何更好的切分和组织非结构化的文档数据

RAG中如何解决上下文知识连贯性问题 || 如何更好的切分和组织非结构化的文档数据

当信息蕴含在较长的上下文时&#xff0c;基于片段的搜索召回&#xff0c;一定会丢失数据&#xff0c;导致最终无法正确的回答问题。 实际上复杂的问题&#xff0c;这里只是说问题本身倾向于从全文获取答案&#xff0c;而不仅仅是基于片段。 斯坦福论文提出的核心问题和解决思路…
阅读更多...
抖店创业者必看！2024年开店营业执照的类型有哪些？开哪个类型？

抖店创业者必看！2024年开店营业执照的类型有哪些？开哪个类型？

大家好&#xff0c;我是电商花花。 最近还是有不少人问花花做抖音小店要营业执照吗&#xff1f;个人店可以吗&#xff1f; 目前开抖音小店主要有个人店、个体工商户、企业店这三种店铺类型。 今天来给大家说一下做抖音小店都有什么类型&#xff0c;以及都有什么区别&#xf…
阅读更多...
MacOs 围炉夜话

MacOs 围炉夜话

文章目录 一、安装 Mac 一、安装 Mac macOS是一套由苹果开发的运行于Macintosh系列电脑上的操作系统。macOS是首个在商用领域成功的图形用户界面操作系统。 VM虚拟机怎么安装mac os&#xff1f;&#xff08;全教程&#xff09; 虚拟机&#xff1a;VMware Workstation 17 pro W…
阅读更多...
企业微信应用开发：使用Cpolar域名配置进行本地接口回调的调试指南

企业微信应用开发：使用Cpolar域名配置进行本地接口回调的调试指南

文章目录 1. Windows安装Cpolar2. 创建Cpolar域名3. 创建企业微信应用4. 定义回调本地接口5. 回调和可信域名接口校验6. 设置固定Cpolar域名7. 使用固定域名校验 企业微信开发者在应用的开发测试阶段&#xff0c;应用服务通常是部署在开发环境&#xff0c;在有数据回调的开发场…
阅读更多...
【蓝桥备赛】字串简写

【蓝桥备赛】字串简写

字串简写 数据范围 字符串的长度为5*10的五次方&#xff0c;on方时间复杂度会很大。 才用动态规划的思想&#xff0c;dp[i]以i开头的的可能性&#xff0c;因为长度必须大于等于k&#xff0c;当i小于k的时候&#xff0c;如果等于第一个字符&#xff0c;s1时&#xff0c;dp[…
阅读更多...
图像压缩感知的MATLAB实现（OMP）

图像压缩感知的MATLAB实现（OMP）

前面实现了 压缩感知的图像仿真&#xff08;MATLAB源代码&#xff09; 效果还不错&#xff0c;缺点是速度慢如牛。 下面我们采用OMP对其进行优化&#xff0c;提升速度。具体代码如下&#xff1a; 仿真 构建了一个MATLAB文件&#xff0c;所有代码都在一个源文件里面&#xf…
阅读更多...
系统保护规则（Sentinel）

系统保护规则（Sentinel）

系统保护规则 CPU使用率 设置 为了方便产生现象&#xff0c; 设置了使用率朝贡国10% 就触发保护 效果 入口QPS 设置 针对 所有接口的平均 QPS 阈值 效果 访问次数很多的情况下&#xff0c;即可出现
阅读更多...
英文输入法（C 语言）

英文输入法（C 语言）

题目 主管期望你来实现英文输入法单词联想功能&#xff0c;需求如下&#xff1a; 依据用户输入的单词前缀&#xff0c;从已输入的英文语句中联想出用户想输入的单词。按字典序输出联想到的单词序列&#xff0c;如果联想不到&#xff0c;请输出用户输入的单词前缀。 注意 英…
阅读更多...
【鸿蒙开发】第十四章 Stage模型应用组件-任务Mission

【鸿蒙开发】第十四章 Stage模型应用组件-任务Mission

1 任务(Mission)管理场景 任务&#xff08;Mission&#xff09;管理相关的基本概念如下&#xff1a; AbilityRecord&#xff1a;系统服务侧管理一个UIAbility实例的最小单元&#xff0c;对应一个应用侧的UIAbility组件实例。系统服务侧管理UIAbility实例数量上限为512个。 Mi…
阅读更多...
Python实战: 获取 后缀名(扩展名) 或 文件名

Python实战: 获取 后缀名(扩展名) 或 文件名

Python实战: 获取 后缀名(扩展名) 或 文件名 &#x1f308; 个人主页&#xff1a;高斯小哥 &#x1f525; 高质量专栏&#xff1a;Matplotlib之旅&#xff1a;零基础精通数据可视化、Python基础【高质量合集】、PyTorch零基础入门教程 &#x1f448; 希望得到您的订阅和支持~ &…
阅读更多...
【大厂AI课学习笔记NO.52】2.3深度学习开发任务实例（5）需求采集考虑维度

【大厂AI课学习笔记NO.52】2.3深度学习开发任务实例（5）需求采集考虑维度

今天来学习&#xff0c;怎么做需求分析&#xff0c;如何明确数据采集需求。 我把自己考试通过的学习笔记&#xff0c;都分享到这里了&#xff0c;另外还有一个比较全的思维脑图&#xff0c;我导出为JPG文件了。下载地址在这里&#xff1a;https://download.csdn.net/download/g…
阅读更多...
《Linux C编程实战》笔记：信号量

《Linux C编程实战》笔记：信号量

信号量在操作系统的书里一般都有介绍&#xff0c;这里就只写书上说的了。 信号量是一个计数器&#xff0c;常用于处理进程或线程的同步问题&#xff0c;特别是对临界资源访问的同步。临界资源可以简单地理解为在某一时刻只能由一个进程或线程进行操作的资源&#xff0c;这里的…
阅读更多...
FairyGUI × Cocos Creator 3.x 使用方式

FairyGUI × Cocos Creator 3.x 使用方式

前言 上一篇文章 FariyGUI Cocos Creator 入门 简单介绍了FairyGUI&#xff0c;并且按照官方demo成功在Cocos Creator2.4.0上运行起来了。 当我今天使用Creator 3.x 再引入2.x的Lib时&#xff0c;发现出现了报错。 这篇文章将介绍如何在Creator 3.x上使用fgui。 引入 首先&…
阅读更多...
最新文章

Copyright @ 2022~2023

友情链接： 我的编程经验分享 一条长河网 尧图网站开发 尧图建网站