写点什么

【Redis 技术专区】「优化案例」谈谈使用 Redis 慢查询日志以及 Redis 慢查询分析指南

作者:洛神灬殇
  • 2023-01-24
    江苏
  • 本文字数:1961 字

    阅读完需:约 6 分钟

【Redis技术专区】「优化案例」谈谈使用Redis慢查询日志以及Redis慢查询分析指南

前提介绍

本篇文章主要介绍了 Redis 的执行的慢查询的功能的查询和配置功能,从而可以方便我们在实际工作中,进行分析 Redis 的性能运行状况以及对应的优化 Redis 性能的佐证和指标因素。


在我们 5.0 左右的版本中 Redis 使用单线程架构和 I/O 多路复用模型来实现高性能的内存数据服务。接下来主要分析 Redis 单线程命令处理机制,接着分析 Redis 单线程模型为什么性能如此之高。

单线程命令的处理机制

Redis 客户端与服务端的模型主要是下图所示。



每次客户端调用都经历了发送命令、执行命令、返回结果三个过程。

本章内容

本章的文章内容主要是一下几点。


什么是慢查询

慢查询就是当 Redis 在处理一条指令的时候,当超过了系统配置的执行时间的阈值的时候,就会被系统当作慢查询统计和判定。

慢查询日志

慢查询日志就是系统在命令执行前后计算每条命令的执行时间,当超过预设阈值,就将这条命令的相关信息(例如:发生时间、耗时、命令的详细信息)记录下来。

Redis 慢查询日志

Redis 慢查询日志功能是用于记录执行时间超过给定时长的命令请求,可以通过查看慢查询日志来监控和优化查询速度。

Redis 慢查询的危害

说到了 Redis 慢查询的危害,就会先说一下 Redis 的运行机制。

Redis 客户端执行一条命令的步骤

Redis 是单线程来处理命令,所以一条命令从客户端到达服务端不会立即被执行,所有的命令都会进入一个队列,然后逐个被执行。



因此 Redis 服务端去执行操作的是可以主要以下几个步骤:



所有的指令都有先后顺序,但是真正意义到达服务端的执行顺序也是不确定的,因为中间有网络传输。但是可以肯定的是,不会有两条命令被同时执行,这样就不会产生并发问题,这就是 Redis 单线程的基本模型。

慢查询引发的问题
  1. 单线程机制:所有命令放在一个队列中

  2. Redis 执行指令主要是在内存中执行、非 IO 阻塞、避免线程切换和竞态产生的消耗。


因为单线程的问题,一个命令不能执行太长时间,不然会阻塞其他命令的执行。所以慢查询会造成整体的 Redis 服务的性能的下降以及 CPU 的耗时和负载变高。


注意:慢查询只会记录执行命令的时间,没有慢查询并不代表客户端没有超时问题

阈值和慢查询的日志的设置

监控 Redis 指令的慢查询功能,需要明确两件事:


  1. 预设阈值怎么设置?

  2. 慢查询记录存放在哪里?

预设阈值怎么设置?

针对于慢查询的阈值,在 Redis 提供了slowlog-log-slower-thanslowlog-max-len配置来解决这两个问题。

阈值参数设置

慢查询执行时间阈值


  • slowlog-log-slower-than:指定执行时间超过多少微秒的命令会被记录到日志上,它的单位是微妙(1 秒=1000 毫秒=1000000 微秒),默认值 10000。


例如,该值设为 100,执行了一条很慢的命令(例如 keys * ),如果它的执行时间超过了 100 微秒,则这个命令会被记录到慢查询日志中。


慢查询数据存储阈值


慢查询日志最多存储多少条,并没有说明存放在那里?主要通过 slowlog-max-len 进行控制和设置。从底层角度分析,Redis 使用了一个列表来存储慢查询日志,slowlog-max-log 就是列表的最大长度。


  • slowlog-max-len:指定服务器上最多保存慢查询日志的条数。

  • slowlog-log-slower-than=0,那么系统会记录所有的命令

  • slowlog-log-slower-than<0,那么对任何命令都不会记录。


例如,该值设为 5,那么命令执行时间超过 slowlog-log-slower-than 设置的时间的命令会被记录到慢查询日志上,如果慢查询日志的数量等于 5,那么再添加慢查询日志时,需要把最早添加的慢查询日志删除,即慢查询日志删除采用先进先出的方式。

慢查询的配置类型和方式

Redis 有两种修改配置的方法:1. 修改配置文件;2. config set 命令动态修改。


例如,使用 config set 命令将 slowlog-log-slower-than 设置为 20000 微秒,slowlog-max-len 设置为 10000:


config set slowlog-log-slower-than 20000config set slowlog-max-len 10000config rewrite
复制代码


如果要 Redis 将配置持久化到本地配置文件,要执行 config rewrite 命令,它会重写配置文件。

慢查询日志的操作命令

慢查询日志的的查询和维护主要是通过:slowlog get、slowlog len、slowlog reset 这几条命令。

slowlog get [n]

慢查询日志有 4 个属性组成:日志 id、发生时间戳、命令耗时、执行命令和参数。


127.0.0.1:6379> slowlog get1) 1) (integer) 1   2) (integer) 1513709400   3) (integer) 11   4) 1) "slowlog"      2) "get"2) 1) (integer) 0   2) (integer) 1513709398   3) (integer) 4   4) 1) "config"      2) "set"      3) "slowlog-log-slower-than"      4) "2"
复制代码

slowlog len

获取慢查询日志列表当前的长度


127.0.0.1:6379> slowlog len(integer) 2
复制代码


上面则说明当前的满查询列表中至于连个慢查询日志。

slowlog reset

实际是对慢查询日志列表做清理操作。


127.0.0.1:6379> slowlog len(integer) 6127.0.0.1:6379> slowlog resetOK127.0.0.1:6379> slowlog len(integer) 1
复制代码


为什么还有 1 个,因为阈值设的比较小,slowlog reset 就属于慢查询。

发布于: 刚刚阅读数: 4
用户头像

洛神灬殇

关注

🏆 InfoQ写作平台-签约作者 🏆 2020-03-25 加入

【个人简介】酷爱计算机科学、醉心编程技术、喜爱健身运动、热衷悬疑推理的“极客达人” 【技术格言】任何足够先进的技术都与魔法无异 【技术范畴】Java领域、Spring生态、MySQL专项、微服务/分布式体系和算法设计等

评论

发布
暂无评论
【Redis技术专区】「优化案例」谈谈使用Redis慢查询日志以及Redis慢查询分析指南_redis_洛神灬殇_InfoQ写作社区