一篇读懂什么是缓存穿透击穿雪崩,分布式锁-程序员宅基地

技术标签: 缓存  wpf  分布式  

缓存

为了提升系统性能,将部分数据放入缓存,加速访问,减少数据的压力

什么数据适合写入缓存?

对于一些对即时性和数据一致性要求不高的,访问量大更新频率不高的数据适合写入缓存

流程图

最简单的可以把数据放入一个map(本地缓存),单体应用时没有什么问题,但是当系统为分布式系统时就会出现很多问题,每一个服务都有一个自己的缓存,就会出现数据不一致等等问题,为了解决这些问题,我们使用统一的一个缓存

使用redis进行缓存

整合redis

pom

<dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-data-redis</artifactId>
        </dependency> 

配置

spring:
  redis:
    host: #
    port: 6379 

缓存击穿、穿透、雪崩

缓存穿透

查询一个一定不存在的数据,由于缓存必定不命中,而去查询数据库,查数据什么也查不到而且我们也没有把这个空结果写入缓存,导致每次差这个数据都会访问一遍数据库,使缓存失去效果,容易被人利用导致数据库压力大,最终导致系统崩溃

解决:将空结果也写入缓存

问题:若以后这个数据又存在了怎么办

解决:加上一个短暂的过期时间!

缓存雪崩

当我们为很多缓存设置了相同的过期时间,在某一时刻,所有缓存同时失效,导致大量请求直接进入数据库导致系统崩溃

解决: 设置过期时间时在原有的失效时间上加一个随机值

缓存击穿

举例:今天晚上20点某新品发售,但是在19点时缓存失效,等到20点时大量请求直接涌入数据库,系统崩溃

对于一些设置了过期时间的key,这些key可能在某一时间内被大量请求访问,如果在大量请求进来之前,缓存失效就会导致大量请求直接打到数据库,导致系统崩溃

解决:加锁,当大量请求访问时,只允许一个请求查询数据,等查完后将数据写入缓存并释放锁

加锁解决缓存击穿问题

在单体应用下

使用

synchronized(this){
} 

本地锁进行加锁

这样就可已解决问题

但对于分布式系统这样就出现问题了

要是有10个服务就要访问十遍数据库,还是没有做到只把一个进程放进来

在分布式系统下想要做到只允许一个进程操作数据库就要用到分布式锁

分布式锁

原理

所有线程去一个地方抢占锁,抢到了就执行操作

可以使用redis,所有人都进来set一个key-value,每个线程进来之前先看有没有人set这个k-v,没有的话就进行set,也就抢到了锁,执行下来的操作,完了之后删除这个k-v;别人进来如果看到了这个k-v说明锁已经被抢去

redis有一个 set k v NX 就表示当这个k不存在时才能set成功

**问题: **等程序拿到锁之后执行其他操作时发生异常直接退出,没有释放锁造成死锁,怎么办?

解决:把释放锁放到final里?

问题:如果还没执行到final机器直接断电,怎么办

解决:给锁设置一个自动过期时间

问题:要是还没来得及设置过期时间机器就崩溃怎么办

归根结底就是加锁和设置过期时间不是一个原子操作

解决:set k v EX 300 NX加锁设置过期时间放到一句里

问题:当业务时间超过锁的过期时间,锁已经过期,等待业务结束再去删锁删的就是别人的锁

解决:我们设置锁时,不再随便设置value,而是设置一个UUID,只删除value和自己设置的value相同的锁,防止删除别人的锁

问题:我们查询这个value和自己设置的value是否相同的这个过程是需要耗费时间的,万一恰好你拿到了你设置的锁的value正在返回时,锁过期了,别的进程又抢占了锁,设置了自己的value,而等到你刚查的value到达时确实和你自己设置的锁的value相同,然后删除锁,结果就把别人的锁删了

归根结底又是查值进行对比对比成功删除锁这两步不是一个原子操作

解决:删锁使用Lua脚本辅助

String script = "if redis.call('get', KEYS[1]) == ARGV[1] then return redis.call('del', KEYS[1]) else return 0 end"; 

使用Redisson实现分布式锁

Redisson将我们上述的问题统统解决,让我们优雅的加锁释放锁

官方文档github.com/redisson/re…[1]

依赖

<dependency>
    <groupId>org.redisson</groupId>
    <artifactId>redisson</artifactId>
    <version>3.14.1</version>
</dependency> 

spring boot

<dependency>
    <groupId>org.redisson</groupId>
    <artifactId>redisson-spring-boot-starter</artifactId>
    <version>3.14.1</version>
</dependency> 

配置

github.com/redisson/re…[2]

缓存数据一致性

双写模式

数据更新->更新数据库->更新缓存

问题:

两个线程:先后修改数据

线程1->写数据库----------------------->写缓存

线程2------------>写数据库->写缓存

此时 就会产生暂时的脏数据

解决:加锁

失效模式

数据更新->更新数据库->删除缓存

问题:

解决:加锁

Spring Cache

将读区数据,写入缓存等等重复的操作整合起来,只需引入一些注解就可实现这些功能

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/2401_83384536/article/details/137549422

智能推荐

c# 调用c++ lib静态库_c#调用lib-程序员宅基地

文章浏览阅读2w次,点赞7次,收藏51次。四个步骤1.创建C++ Win32项目动态库dll 2.在Win32项目动态库中添加 外部依赖项 lib头文件和lib库3.导出C接口4.c#调用c++动态库开始你的表演...①创建一个空白的解决方案,在解决方案中添加 Visual C++ , Win32 项目空白解决方案的创建:添加Visual C++ , Win32 项目这......_c#调用lib

deepin/ubuntu安装苹方字体-程序员宅基地

文章浏览阅读4.6k次。苹方字体是苹果系统上的黑体,挺好看的。注重颜值的网站都会使用,例如知乎:font-family: -apple-system, BlinkMacSystemFont, Helvetica Neue, PingFang SC, Microsoft YaHei, Source Han Sans SC, Noto Sans CJK SC, W..._ubuntu pingfang

html表单常见操作汇总_html表单的处理程序有那些-程序员宅基地

文章浏览阅读159次。表单表单概述表单标签表单域按钮控件demo表单标签表单标签基本语法结构<form action="处理数据程序的url地址“ method=”get|post“ name="表单名称”></form><!--action,当提交表单时,向何处发送表单中的数据,地址可以是相对地址也可以是绝对地址--><!--method将表单中的数据传送给服务器处理,get方式直接显示在url地址中,数据可以被缓存,且长度有限制;而post方式数据隐藏传输,_html表单的处理程序有那些

PHP设置谷歌验证器(Google Authenticator)实现操作二步验证_php otp 验证器-程序员宅基地

文章浏览阅读1.2k次。使用说明:开启Google的登陆二步验证(即Google Authenticator服务)后用户登陆时需要输入额外由手机客户端生成的一次性密码。实现Google Authenticator功能需要服务器端和客户端的支持。服务器端负责密钥的生成、验证一次性密码是否正确。客户端记录密钥后生成一次性密码。下载谷歌验证类库文件放到项目合适位置(我这边放在项目Vender下面)https://github.com/PHPGangsta/GoogleAuthenticatorPHP代码示例://引入谷_php otp 验证器

【Python】matplotlib.plot画图横坐标混乱及间隔处理_matplotlib更改横轴间距-程序员宅基地

文章浏览阅读4.3k次,点赞5次,收藏11次。matplotlib.plot画图横坐标混乱及间隔处理_matplotlib更改横轴间距

docker — 容器存储_docker 保存容器-程序员宅基地

文章浏览阅读2.2k次。①Storage driver 处理各镜像层及容器层的处理细节,实现了多层数据的堆叠,为用户 提供了多层数据合并后的统一视图②所有 Storage driver 都使用可堆叠图像层和写时复制(CoW)策略③docker info 命令可查看当系统上的 storage driver主要用于测试目的,不建议用于生成环境。_docker 保存容器

随便推点

网络拓扑结构_网络拓扑csdn-程序员宅基地

文章浏览阅读834次,点赞27次,收藏13次。网络拓扑结构是指计算机网络中各组件(如计算机、服务器、打印机、路由器、交换机等设备)及其连接线路在物理布局或逻辑构型上的排列形式。这种布局不仅描述了设备间的实际物理连接方式,也决定了数据在网络中流动的路径和方式。不同的网络拓扑结构影响着网络的性能、可靠性、可扩展性及管理维护的难易程度。_网络拓扑csdn

JS重写Date函数,兼容IOS系统_date.prototype 将所有 ios-程序员宅基地

文章浏览阅读1.8k次,点赞5次,收藏8次。IOS系统Date的坑要创建一个指定时间的new Date对象时,通常的做法是:new Date("2020-09-21 11:11:00")这行代码在 PC 端和安卓端都是正常的,而在 iOS 端则会提示 Invalid Date 无效日期。在IOS年月日中间的横岗许换成斜杠,也就是new Date("2020/09/21 11:11:00")通常为了兼容IOS的这个坑,需要做一些额外的特殊处理,笔者在开发的时候经常会忘了兼容IOS系统。所以就想试着重写Date函数,一劳永逸,避免每次ne_date.prototype 将所有 ios

如何将EXCEL表导入plsql数据库中-程序员宅基地

文章浏览阅读5.3k次。方法一:用PLSQL Developer工具。 1 在PLSQL Developer的sql window里输入select * from test for update; 2 按F8执行 3 打开锁, 再按一下加号. 鼠标点到第一列的列头,使全列成选中状态,然后粘贴,最后commit提交即可。(前提..._excel导入pl/sql

Git常用命令速查手册-程序员宅基地

文章浏览阅读83次。Git常用命令速查手册1、初始化仓库git init2、将文件添加到仓库git add 文件名 # 将工作区的某个文件添加到暂存区 git add -u # 添加所有被tracked文件中被修改或删除的文件信息到暂存区,不处理untracked的文件git add -A # 添加所有被tracked文件中被修改或删除的文件信息到暂存区,包括untracked的文件...

分享119个ASP.NET源码总有一个是你想要的_千博二手车源码v2023 build 1120-程序员宅基地

文章浏览阅读202次。分享119个ASP.NET源码总有一个是你想要的_千博二手车源码v2023 build 1120

【C++缺省函数】 空类默认产生的6个类成员函数_空类默认产生哪些类成员函数-程序员宅基地

文章浏览阅读1.8k次。版权声明:转载请注明出处 http://blog.csdn.net/irean_lau。目录(?)[+]1、缺省构造函数。2、缺省拷贝构造函数。3、 缺省析构函数。4、缺省赋值运算符。5、缺省取址运算符。6、 缺省取址运算符 const。[cpp] view plain copy_空类默认产生哪些类成员函数

推荐文章

热门文章

相关标签