> 本文由 苏州市天智教育培训中心 技术团队整理,基于真实生产故障复盘,面向一线运维与开发同学,可直接用于排障参考。

一、问题现象

Redis 内存使用率冲到 95%,同时监控发现主从之间时不时触发全量同步,从库 CPU 飙高,客户端偶发超时。看起来是两个问题,其实是同一个根因。

二、排查思路速览

先按下面的路径走,每一步都有明确的判断分支,避免"上来就重启"这种无效操作。

Redis · 内存告警与主从全量同步风暴内存告警 + 主从同步抖动开始info memory 看 used_memory 与碎片率是否有大量无 TTL 的 key?判断是内存只增不减:必须补 TTL 或改存储结构否看是否有大 key / 反向命令阻塞主线程redis-cli --bigkeys 找大 key检查 repl-backlog-size 是否过小导致频繁全量同步清理无主 key 并调大复制缓冲观察主从延迟与内存水位内存回落,仅增量同步结束

三、先看清链路:Redis 的典型架构

动手之前先明确"请求经过了哪些环节",把问题定位到具体一层,排查效率会成倍提升。

Redis 高可用架构访问层客户端连接池Proxy / 集群路由实例层MasterReplicaSentinel / Cluster持久化RDB 快照AOF 重写观测内存碎片率慢日志主从延迟

四、根因分析

结合现场日志、监控与配置,逐条核对,绝大多数情况都能收敛到下面这几类原因:

  1. 业务写入大量无过期时间的 key,内存只涨不降
  2. 大 key(如一个 Hash 存几十万字段)导致删除/过期阻塞主线程
  3. repl-backlog-size 太小,从库断连后只能全量同步
  4. AOF 重写与 RDB 快照同时发生,IO 抖动

五、处置过程

处置原则:先止血、再根治。先让业务恢复,再回头解决根因,不要在故障中做长期改造。

  1. 大 key 是内存与延迟问题的共同元凶,必须专项治理
  2. 所有缓存 key 强制设置 TTL,业务无感知也要兜底
  3. 调大 repl-backlog-size,让短时断连走增量同步
  4. 错峰执行 RDB/AOF 重写与备份

六、关键命令与配置

下面这些命令/配置可以直接在生产上核对(执行前请确认环境与权限):

redis-cli -h redis info memory | grep -E 'used_memory_human|mem_fragmentation_ratio'
redis-cli -h redis --bigkeys        # 大 key 扫描
redis-cli -h redis --hotkeys        # 热点 key(需 lfu 策略)
redis-cli -h redis info replication | grep -E 'master_link_status|master_last_io_seconds_ago'

七、复盘

故障恢复后必须做复盘,重点不是"谁的责任",而是"哪个机制缺位":

  1. 根因是某业务用"永不过期"的 Hash 当持久存储,越攒越大
  2. 复盘发现没有大 key 巡检,问题在积累半年后集中爆发
  3. 全量同步在业务高峰发生,放大了影响面

八、预防建议

  1. 建立大 key 巡检(每周一次)并设定阈值告警
  2. 缓存 key 强制 TTL,代码层兜底默认过期时间
  3. 主从复制参数按"最大可容忍断连时长"反推配置
  4. 持久化与备份错峰,避开业务高峰

九、官方版本动态(自动同步)

以下内容由官方发布渠道自动同步(最近同步 2026-10-11),用于提醒你:同一个问题在不同版本上的表现与处置方式可能不同,动手前先确认线上实际版本。

  • Redis Release 8.10.2(2026-09-17 发布):Redis Release 8.10.2 官方说明
  • Redis Release 8.8.3(2026-09-17 发布):Redis Release 8.8.3 官方说明

> 版本升级前务必先在测试环境验证,特别是标注了「破坏性变更」或「停止维护」的版本。

十、写在最后

上面这套排查方法,是 Redis 在生产环境中最常见的一类问题,也是大数据方向岗位面试里经常被追问的场景题。很多人搜「苏州运维」或者关心「数据库运维培训」,真正想确认的其实是:课程讲不讲真实的线上故障。我们在云计算运维工程师课程里,会把这类故障做成实战演练——从监控曲线、日志、命令输出一路推到根因,再动手恢复,而不是背命令。苏州校区面授 + 线上同步,主打苏州运维方向的实战教学,就业推荐覆盖江浙沪。如果你正在做大数据方向、或者想转行进入大数据领域,可以了解一下我们的课程(苏州运维、数据库运维培训、苏州运维哪个好),也可以直接联系我们做一次免费的职业与技术评估。

十一、延伸阅读