Redis运维之慢查询日志

来自:互联网
时间:2020-05-14
阅读:

使用好Redis,不仅仅要知道Api的使用,还要知道如何防止Redis阻塞及阻塞的查看和分析。今天,和大家聊聊如何发现Redis的阻塞——通过慢查询找到阻塞的命令。

MySQL一样,Redis也有慢查询记录。当命令的执行时间超过设定的值时,该命令就会记录到慢查询列表中。通过慢查询,我们可以改进我们的程序。防止redis阻塞。

配置

慢查询的配置参数有两个:

  • slowlog-log-slower-than

  • slowlog-max-len

slowlog-log-slower-than用来设定一个阈值,单位为微妙,默认值为10000,即10毫秒。

  • 当值设置为小于0时,任何命令都不会记录;

  • 当值等于0时,会记录所有的命令。

slowlog-max-len表示最多记录的条数,默认为128,例如将它设为10,当有第11条慢查询插入的话,那么队头的数据就会出列。

这两个配置还支持动态配置,当项目刚刚开始时,访问量不是很大时,可以将slow-log-slower-than的值设大些。当访问量越来越大的时候,可能就需要将其值改小点。但我们不想停止redis服务,那么就可以动态的修改该配置。

127.0.0.1:6379> config set slowlog-log-slower-than 1000
OK  
# 在线修改配置
127.0.0.1:6379> config rewrite
OK
# 将修改的配置持久化到配置文件中

运维建议:当访问量大的时候,一般我们建议将slowlog-log-slower-than设置为1000,或更小。当这个值为1000时,表示redis最多能支持1000个并发

慢查询查看

redis的慢查询查看和mysql有区别,redis查看的话有专门的命令。

获取慢查询日志

slowlog get [n],n表示条数,默认为10

127.0.0.1:6379> slowlog get
1) 1) (integer) 18004
   2) (integer) 1589424642
   3) (integer) 50
   4) 1) "slowlog"
      2) "get"
   5) "127.0.0.1:58364"
   6) ""
2) 1) (integer) 18003
   2) (integer) 1589423805
   3) (integer) 47
   4) 1) "slowlog"
      2) "get"
   5) "127.0.0.1:58364"
   6) ""
……
  • 第一个参数是日志标识id号

  • 第二个为发生时间戳

  • 第三个为命令执行的时间(微妙)

  • 最后一个是命令及参数。

获取慢查询的长度

slowlog len

127.0.0.1:6379> slowlog len
(integer) 128

清空慢查询列表

127.0.0.1:6379> slowlog reset
OK

将慢查询日志持久化到mysql中

因为redis的长度有限制,所以在慢查询很多的情况下,会出现丢失的情况。我们可以定时去redis取出慢查询记录列表,将其持久化到mysql中,防止这种情况发生。

伪代码如下:

while (true) {
    $slowlen = $redis->slowlog('len');
    $slowlogs = $redis->slowlog('get',$slowlen);
    $insSql  = "INSERT INTO 
        slowlog(exec_time,run_time,command) VALUES";
     
    if (is_array($slowlogs) && count($slowlogs)) {
     
        foreach ($slowlogs as $slowlog) {
            $execTime = $slowlog[2];
            $runTime  = $slowlog[1];
            $command  = implode(' ', $slowlog[3]);
     
            $insSql .= "('$execTime', '$runTime','$command'),";
        }
     
        $flag = mysqli_query($mysqli, substr($insSql, 0, -1));
     
        if ($flag) {
            $redis->slowlog('reset');
        }
    }
    
    unsleep(10000);
}

以上代码,即可实现慢查询持久化到MYSQL中。

返回顶部
顶部