当前位置: 首页 > news >正文

Redis 慢查询分析与优化

Redis 慢查询分析与优化

参考书籍 : https://weread.qq.com/web/reader/d5432be0813ab98b6g0133f5kd8232f00235d82c8d161fb2

以下从配置参数耗时细分分析工具优化策略四个维度深入解析 Redis 慢查询问题,结合实战调优建议,帮助开发者精准定位并优化性能瓶颈。


一、慢查询核心配置参数

image

Redis 慢查询功能通过两个关键参数控制,直接影响日志记录范围和存储容量:

  1. slowlog-log-slower-than

    • 功能:设定命令执行时间的阈值(单位:微秒),超过此值的命令会被记录。

    • 默认值:10000 微秒(10 毫秒),建议高并发场景调整为 1000 微秒(1 毫秒)

    • 特殊值

      • 0​:记录所有命令(调试用)。
      • 负值:禁用慢查询日志。
  2. slowlog-max-len

    • 功能:定义慢查询日志列表的最大长度(先进先出队列)。
    • 默认值:128 条,生产环境建议调至 1000 条以上,避免关键日志被覆盖。

配置示例

# 动态设置(临时生效)  
CONFIG SET slowlog-log-slower-than 1000  
CONFIG SET slowlog-max-len 1000  # 持久化到配置文件(需重启)  
slowlog-log-slower-than 1000  
slowlog-max-len 1000  

二、耗时细分与瓶颈定位

Redis 命令执行全流程耗时可拆分为以下阶段:

  1. 网络传输(客户端到服务端):

    • 网络延迟或丢包可能导致客户端感知的耗时增加,但不记录在慢查询日志中
    • 排查工具:ping​、traceroute​ 或监控工具(如 Prometheus)。
  2. 命令排队(Redis 内部队列):

    • 单线程架构下,若并发请求过高,命令需排队等待执行。
    • 排队时间不纳入慢查询统计,但可能导致客户端超时。
  3. 命令执行(核心耗时):

    • 实际执行命令的耗时,由慢查询日志的 duration​ 字段记录(单位:微秒)。
    • 高复杂度命令(如 KEYS​、SORT​)或 BigKey 操作是主要瓶颈。
  4. 结果返回(服务端到客户端):

    • 网络传输时间同样不计入慢查询日志,但可能影响客户端体验。

三、慢查询分析工具
  1. 内置命令

    • **SLOWLOG GET [n]​**:获取最近 n 条慢查询日志,含时间戳、耗时、具体命令。

      image

      127.0.0.1:6379> SLOWLOG GET 2  
      1) 1) (integer) 12345         # 日志ID  2) (integer) 1680000000    # 时间戳  3) (integer) 15000         # 耗时(微秒)  4) 1) "SORT"               # 命令及参数  2) "mylist"  
      
    • **SLOWLOG LEN​**:查看当前慢查询日志数量。

    • **SLOWLOG RESET​**:清空日志列表。

  2. 监控工具

    • **INFO COMMANDSTATS​**:统计所有命令的执行次数和总耗时,定位高频耗时命令。

      image

      参数介绍:

      截图中每一项均以 cmdstat_<命令名>​ 开头,代表对应 Redis 命令的执行统计信息,各参数含义如下:

      参数名含义
      calls该命令的总执行次数。
      usec该命令所有执行耗时的总和(单位:微秒,μs)。
      usec_per_call该命令的平均执行时间(单位:微秒,μs),即 usec ÷ calls​。
      rejected_calls该命令被拒绝执行的次数(如权限不足、命令被禁用等情况)。
      failed_calls该命令执行过程中失败的次数(如参数错误、执行逻辑异常等)。

      cmdstat_ttl:calls=304,usec=3064,usec_per_call=10.08,rejected_calls=1,failed_calls=0​ 为例:

      • TTL​ 命令共执行 304​ 次,总耗时 3064​ 微秒,平均每次耗时 10.08​ 微秒,被拒绝执行 1​ 次,执行失败 0​ 次。

      其他项(如 cmdstat_auth​、cmdstat_set​ 等)均遵循此格式,分别对应各自命令的统计数据,可据此分析命令的执行频率、性能及异常情况。

    • **MONITOR​**:实时捕获所有命令(慎用,可能引发性能问题)。

    • 第三方工具:Prometheus + Grafana 实现可视化监控。 后续研究


四、优化策略与实战建议
  1. 规避高复杂度命令

    • 替代方案

      • SCAN​ 代替 KEYS​ 遍历键。
      • 客户端实现排序,避免 SORT​ 命令处理大数据集。
    • 分页处理:对大型集合使用 LRANGE​ 分批次获取数据。

  2. BigKey 治理

    • 拆分存储:将大 Hash/List 拆分为多个子键(如 user:1001:logs_part1​)。

    • 渐进式删除:通过 Lua 脚本分批次删除 BigKey,避免阻塞。

      -- 分批次删除大列表  
      local key = KEYS[1]  
      for i = 1, 1000 do  redis.call("LPOP", key)  
      end  
      
  3. 配置调优

    • 内存管理:设置 maxmemory​ 和淘汰策略(如 allkeys-lru​)。
    • 集群分片:使用 Redis Cluster 分散负载,缓解单节点压力。

五、调优最佳实践
  1. 定期日志分析

    • 每日检查慢查询日志,识别高频耗时命令。
    • 结合 INFO COMMANDSTATS​ 验证优化效果。
  2. 阈值动态调整

    • 业务高峰期临时降低 slowlog-log-slower-than​(如 500 微秒),捕捉潜在问题。
  3. 日志持久化

    • 定期将慢查询日志导出到外部存储(如 Elasticsearch),便于长期分析。

总结

通过合理配置 slowlog-log-slower-than​ 和 slowlog-max-len​,结合 SLOWLOG GET​ 和监控工具,可精准定位 Redis 性能瓶颈。优化核心在于规避高复杂度命令、治理 BigKey、动态调整配置及利用集群技术。定期分析日志与监控数据,是保障 Redis 高性能运行的关键。

相关文章:

  • 2025 年职业院校技能大赛网络建设与运维赛项Docker赛题解析
  • JS省市区三级联动查询示例代码(城市查询、地区查询)
  • SaltStack远程协助工具
  • 我用deepseek做了一个提取压缩文件夹下pdf和word文件工具
  • Java抽象类、接口和内部类介绍
  • Spring AI Alibaba Graph基于 ReAct Agent 的天气预报查询系统
  • 解决 Arduino IDE 2.3.6 在 Windows 上无法启动:缺少 Documents 文件夹与注册表路径错误
  • Spring AOP 事务
  • 【Linux专栏】zip 多个文件不带路径
  • 2025年渗透测试面试题总结-拷打题库09(题目+回答)
  • Windows1909,21H2哪个版本更稳定
  • 小刚说C语言刷题——1039 求三个数的最大数
  • 1️⃣4️⃣three.js_Stats性能监视器
  • 机器学习中,什么叫监督学习?什么叫非监督学习?
  • 25.解决中医知识问答删除历史对话功能后端处理请求时抛出异常
  • 【大数据、数据开发与数据分析面试题汇总(含答案)】
  • OpenCV训练题
  • 【Redis】Redis 特性
  • L1-1、Prompt 是什么?为什么它能“控制 AI”?
  • 爱普生TG-5006CG成为提升5G RedCap时钟同步精度的理想选择
  • 护航民营企业出海,上海设37家维权工作站、建立近百人专家团队
  • 山西公布商标侵权典型案例:一工厂生产价值三百多万假“维达”纸被查
  • 普京呼吁乌方响应和平倡议,称将分析民用设施停火提议
  • 跨市调任:李强已任河北唐山市检察院党组书记
  • 张九思任电子科大副教授,曾以学生身份入选爱思唯尔全球前2%顶尖科学家
  • 经济日报:“关税讹诈”拦不住中国制造升级