Skip to content

第 4 章:key 的生命周期与内存 ​

线上 Redis 出事,八成不是命令写错,是内存满了、或者某个 key 大得离谱。


学习目标 ​

  • 四种方式设置过期时间,知道该用哪种
  • 理解"过期"不等于"立刻从内存消失"
  • 八种淘汰策略各适用什么场景,默认那个为什么危险
  • 会估算一个 key 占多少内存,会找出大 key 和热 key

4.1 设过期的四种方式 ​

python
r.set("code:13800138000", "123456", ex=300)   # 方案一:写的同时设秒级过期
r.setex("code:13800138000", 300, "123456")    # 方案二:专用命令
r.expire("code:13800138000", 300)             # 方案三:对已有 key 补设
r.set("x", "1", px=1500)                      # 方案四:毫秒级(px)

验证:

命令含义
TTL key剩余秒数;-1 没设过期;-2 key 不存在
PTTL key剩余毫秒
PERSIST key去掉过期,变永久

线上最常见的错误是"忘了设过期"。缓存、验证码、会话都该有 TTL——没有 TTL 的缓存,等于把数据库的数据无限复制一份到内存里,迟早撑爆。


4.2 过期 ≠ 立刻消失 ​

Redis 的过期处理是两种策略配合:

  • 惰性删除:访问到这个 key 时,发现过期了,才删;
  • 定期删除:每 100 毫秒抽一批设了过期时间的 key 检查,删掉过期的。

这意味着:一个过期了但一直没人访问的 key,可能还占着内存,直到被抽样扫到。

INFO memory 里的内存,被谁吃掉了业务数据(used_memory_dataset)结构开销dict / SDS / 编码碎片frag ratio副本/复制缓冲repl backlog同样 100 万个 10 字节的字符串,实际占用远大于 10 MB——每个 key 都有 dictEntry、SDS 头、指针开销。经验值:小 String 的实际开销约为裸数据的 2–4 倍;Hash/List 在元素少时用紧凑编码,反而更省。过期但未被清理的 key已过期已过期仍有效← 惰性删除:没人访问就继续占着,直到定期抽样扫到所以"内存占用"和"有效数据量"经常对不上,差额未必是泄漏。

4.3 内存满了:八种淘汰策略 ​

maxmemory-policy 决定"内存到上限时删谁":

策略淘汰范围淘汰依据适用
noeviction(默认)不淘汰写入直接报错 OOM command not allowed当数据库用,绝不能丢数据
allkeys-lru所有 key最久未使用纯缓存场景首选
allkeys-lfu所有 key使用频率最低有明显热点、长尾分布
allkeys-random所有 key随机几乎不用
volatile-lru只有设了过期的最久未使用缓存与持久数据混在同一实例
volatile-lfu只有设了过期的频率最低同上,热点明显
volatile-random只有设了过期的随机几乎不用
volatile-ttl只有设了过期的剩余时间最短过期时间即优先级

默认的 noeviction 是陷阱:它不淘汰,直接让写入失败。纯缓存实例如果没改这个配置,内存一满,业务写缓存全部报错——而代码里往往没处理这个异常,表现就是"莫名其妙开始出错"。

纯缓存的标准配置:

bash
maxmemory 2gb
maxmemory-policy allkeys-lru

maxmemory 别设成物理内存的全部。留 20%–30% 给复制缓冲、碎片和 fork 时的开销,否则容器会被 OOM killer 干掉。


4.4 一个 key 占多少,怎么算 ​

不用精确到字节,要的是量级判断:

单个 String 占用 ≈ 值大小 + key 名大小 + 约 100 字节的结构开销
数据100 万个 key 的估算说明
10 字节字符串150–400 MB开销是裸数据的几倍
100 字节 JSON300–500 MB仍以开销为主
1 KB JSON1.2–1.5 GB数据开始占主导
100 KB 大 value100 GB+绝对不能这么存

精确值用 MEMORY USAGE key:

bash
redis-cli MEMORY USAGE book:1001:detail
# (integer) 152

4.5 找出大 key 和热 key ​

目标命令注意
找大 keyredis-cli --bigkeys抽样扫描,会占用 CPU,低峰期跑
单 key 大小MEMORY USAGE <key>精确
找热 keyredis-cli --hotkeys需要 LFU 策略才有效
看命令耗时SLOWLOG GET 10定位慢命令
看整体INFO memory / INFO stats日常监控两项必看

大 key 的处理不要用 DEL:删除一个几百万元素的 Hash 会阻塞几秒。用 UNLINK(异步删除,后台线程回收),或者用 HSCAN 分批删字段。


4.6 三条从事故里换来的经验 ​

  1. 所有缓存 key 都要有 TTL,哪怕设成 7 天。没有 TTL 的 key 是内存泄漏的种子;
  2. 纯缓存实例一定改 allkeys-lru,并且监控 evicted_keys。这个指标长期为 0 说明容量够,突然飙升说明该扩容或查大 key;
  3. 单 value 别超过 10 KB。超过就考虑拆成多个 key 或换存储方式——Redis 单线程,一个大 value 的读写会卡住所有人。

本章小结 ​

要点说明
设过期set(ex=)、setex、expire、px 毫秒级
过期机制惰性删除 + 定期抽样,过期不等于立刻释放
默认策略noeviction,内存满时写入报错,纯缓存必须改
纯缓存配置maxmemory 留余量 + allkeys-lru
内存估算小 String 开销是裸数据 2–4 倍
大 key--bigkeys 找、MEMORY USAGE 量、UNLINK 删
监控指标evicted_keys、used_memory、SLOWLOG

下一章 ​

容量的事说完了,接下来是缓存本身最容易出事的地方:穿透、击穿、雪崩。这三个词经常被混着说,其实成因和解法完全不同。

本文阅读--次|全站访问--次|访客--人