缓存穿透击穿雪崩
穿透、击穿和雪崩是缓存系统最经典的三类故障。它们表象都是数据库压力升高,但原因分别是查不存在、热点失效和大面积失效。
# 1. 学习定位
| 维度 | 内容 |
|---|---|
| 难度层级 | 缓存故障 |
| 核心目标 | 先会用,再理解机制,最后能做工程取舍和故障分析 |
| 学习方法 | 带着业务场景看命令、SQL、数据结构、日志和运行时指标 |
# 2. 核心地图
缓存穿透击穿雪崩
├─ 穿透
├─ 击穿
├─ 雪崩
├─ 空值缓存
├─ Bloom Filter
├─ 互斥重建
├─ 逻辑过期
└─ TTL 抖动
# 3. 小章节深度讲解
下面把核心地图中的每个点拆开讲。每个小节都同时面向开发和运维:开发侧关注怎么设计、怎么写代码、怎么避免错误;运维侧关注怎么监控、怎么定位、怎么恢复。
# 3.1. 穿透
# 是什么
穿透 属于缓存稳定性问题。缓存不是简单加速层,它决定数据库回源压力、数据新鲜度、热点保护和故障降级。
# 开发人员怎么用
开发人员要为不同数据定义 TTL、随机抖动、空值缓存、热点重建和一致性策略。写库删缓存、延迟双删、binlog 订阅都要配合失败补偿。
# 运维人员怎么看
运维人员要监控命中率、过期速率、淘汰数量、热点 key、大 key、回源量和数据库压力。Redis 故障时要看数据库是否被缓存失效放大。
# 常见风险
常见风险是大量 key 同时过期或热点 key 硬过期,瞬间把所有请求打回数据库。缓存系统必须有保护数据库的设计。
# 3.2. 击穿
# 是什么
击穿 属于缓存稳定性问题。缓存不是简单加速层,它决定数据库回源压力、数据新鲜度、热点保护和故障降级。
# 开发人员怎么用
开发人员要为不同数据定义 TTL、随机抖动、空值缓存、热点重建和一致性策略。写库删缓存、延迟双删、binlog 订阅都要配合失败补偿。
# 运维人员怎么看
运维人员要监控命中率、过期速率、淘汰数量、热点 key、大 key、回源量和数据库压力。Redis 故障时要看数据库是否被缓存失效放大。
# 常见风险
常见风险是大量 key 同时过期或热点 key 硬过期,瞬间把所有请求打回数据库。缓存系统必须有保护数据库的设计。
# 3.3. 雪崩
# 是什么
雪崩 属于缓存稳定性问题。缓存不是简单加速层,它决定数据库回源压力、数据新鲜度、热点保护和故障降级。
# 开发人员怎么用
开发人员要为不同数据定义 TTL、随机抖动、空值缓存、热点重建和一致性策略。写库删缓存、延迟双删、binlog 订阅都要配合失败补偿。
# 运维人员怎么看
运维人员要监控命中率、过期速率、淘汰数量、热点 key、大 key、回源量和数据库压力。Redis 故障时要看数据库是否被缓存失效放大。
# 常见风险
常见风险是大量 key 同时过期或热点 key 硬过期,瞬间把所有请求打回数据库。缓存系统必须有保护数据库的设计。
# 3.4. 空值缓存
# 是什么
空值缓存 属于缓存稳定性问题。缓存不是简单加速层,它决定数据库回源压力、数据新鲜度、热点保护和故障降级。
# 开发人员怎么用
开发人员要为不同数据定义 TTL、随机抖动、空值缓存、热点重建和一致性策略。写库删缓存、延迟双删、binlog 订阅都要配合失败补偿。
# 运维人员怎么看
运维人员要监控命中率、过期速率、淘汰数量、热点 key、大 key、回源量和数据库压力。Redis 故障时要看数据库是否被缓存失效放大。
# 常见风险
常见风险是大量 key 同时过期或热点 key 硬过期,瞬间把所有请求打回数据库。缓存系统必须有保护数据库的设计。
# 3.5. Bloom Filter
# 是什么
Bloom Filter 属于 Redis 数据结构或内部编码。Redis 的性能来自“用合适结构表达合适问题”,而不是把所有内容都塞进一个大字符串。
# 开发人员怎么用
开发人员要根据访问模式选型:整体缓存用 String,局部字段用 Hash,排行用 ZSet,可靠消息用 Stream,近似统计用 HyperLogLog 或概率结构。
# 运维人员怎么看
运维人员要观察单 key 大小、元素数量、编码转换、内存占用和慢命令。内部编码从紧凑结构转换为哈希表或跳表后,内存和耗时可能阶跃变化。
# 常见风险
常见风险是 key 粒度失控:过细导致 key 数爆炸,过粗形成大 key。专家级建模要在访问效率和运维可控之间取平衡。
# 3.6. 互斥重建
# 是什么
互斥重建 属于缓存稳定性问题。缓存不是简单加速层,它决定数据库回源压力、数据新鲜度、热点保护和故障降级。
# 开发人员怎么用
开发人员要为不同数据定义 TTL、随机抖动、空值缓存、热点重建和一致性策略。写库删缓存、延迟双删、binlog 订阅都要配合失败补偿。
# 运维人员怎么看
运维人员要监控命中率、过期速率、淘汰数量、热点 key、大 key、回源量和数据库压力。Redis 故障时要看数据库是否被缓存失效放大。
# 常见风险
常见风险是大量 key 同时过期或热点 key 硬过期,瞬间把所有请求打回数据库。缓存系统必须有保护数据库的设计。
# 3.7. 逻辑过期
# 是什么
逻辑过期 属于缓存稳定性问题。缓存不是简单加速层,它决定数据库回源压力、数据新鲜度、热点保护和故障降级。
# 开发人员怎么用
开发人员要为不同数据定义 TTL、随机抖动、空值缓存、热点重建和一致性策略。写库删缓存、延迟双删、binlog 订阅都要配合失败补偿。
# 运维人员怎么看
运维人员要监控命中率、过期速率、淘汰数量、热点 key、大 key、回源量和数据库压力。Redis 故障时要看数据库是否被缓存失效放大。
# 常见风险
常见风险是大量 key 同时过期或热点 key 硬过期,瞬间把所有请求打回数据库。缓存系统必须有保护数据库的设计。
# 3.8. TTL 抖动
# 是什么
TTL 抖动 属于缓存稳定性问题。缓存不是简单加速层,它决定数据库回源压力、数据新鲜度、热点保护和故障降级。
# 开发人员怎么用
开发人员要为不同数据定义 TTL、随机抖动、空值缓存、热点重建和一致性策略。写库删缓存、延迟双删、binlog 订阅都要配合失败补偿。
# 运维人员怎么看
运维人员要监控命中率、过期速率、淘汰数量、热点 key、大 key、回源量和数据库压力。Redis 故障时要看数据库是否被缓存失效放大。
# 常见风险
常见风险是大量 key 同时过期或热点 key 硬过期,瞬间把所有请求打回数据库。缓存系统必须有保护数据库的设计。
# 3.9. 本篇学习实验
建议准备一个独立 Redis 实例,构造小 key、大 key、热点 key、过期 key 和慢命令,观察 INFO、SLOWLOG、LATENCY、内存变化和客户端超时。每个实验都要记录命令复杂度和返回数据量。
开发侧实验重点是理解数据结构和命令边界,运维侧实验重点是理解延迟、内存和复制如何变化。真正掌握本篇内容,应该能从延迟尖刺反推大 key、慢命令、持久化或网络问题。
# 4. 核心机制
- 缓存穿透:请求查询不存在的数据,缓存和数据库都没有,攻击或异常参数会持续回源。
- 缓存击穿:单个热点 key 过期,大量并发同时查询数据库。
- 缓存雪崩:大量 key 同时失效或 Redis 故障,大量请求集中回源。
- 解决方案包括空值缓存、布隆过滤器、互斥锁、逻辑过期、TTL 随机化和限流降级。
# 5. 工程实践
- 不存在数据使用短 TTL 空值缓存,防止反复查库。
- 热点 key 使用逻辑过期加异步刷新,减少硬过期瞬间并发。
- TTL 加随机抖动,避免批量同时过期。
- 回源链路加限流、请求合并和熔断。
# 6. 常见坑
- 空值缓存 TTL 过长,真实数据创建后仍读不到。
- 互斥锁没有超时,重建线程失败后所有请求卡住。
- 布隆过滤器更新不及时,误判影响业务。
- 只处理 Redis key 过期,不处理 Redis 整体故障。
# 7. 专家视角
- 缓存故障治理要把恶意流量、热点流量和系统故障分开处理。
- 专家会给热点 key 建立识别、预热、刷新和降级通道。
- 缓存保护的最终目标是保护数据库和核心业务,而不是保证每个请求都实时成功。
# 8. Tips 快问快答
Q:穿透和击穿区别是什么?
A:穿透查不存在数据,击穿是热点存在但缓存失效。
Q:布隆过滤器能完全防穿透吗?
A:不能,它有误判率,也需要维护更新。
Q:逻辑过期有什么好处?
A:避免热点 key 硬过期,旧值可短暂服务,后台异步刷新。
# 9. 阶段小结
缓存穿透击穿雪崩 的学习重点不是记住零散概念,而是把它放回真实系统:数据如何进入、如何存储、如何被查询、如何在并发下保持正确、如何在故障后恢复。掌握这些连接关系,才能从“会用”走向“能设计、能优化、能排障”。