Redis-jedis连接池配置错误导致Redis CPU飙高

一、背景

今天业务突然告知 Redis 访问比较慢,但 Redis 侧并没有什么告警,经过一系列排查,最终发现 auth 认证的频率过高,定位到业务测连接池配置有问题,最终解决问题

二、根本原因

研发 jedis 的配置,出现了没有池化的情况,我用 AI 写了 JAVA 代码验证,最终发现问题

  • spring boot 1.x : 这个版本的配置文件中,不写 pool 关键字也会默认池化
  • spring boot 2.x : 这个版本的配置文件中,必须强制写 pool 关键字才会池化
spring:
  application:
    name: jedis-boot1-simple-demo
  redis:
    host: ${REDIS_HOST:127.0.0.1}
    port: ${REDIS_PORT:6379}
    password: ${REDIS_PASSWORD:123456}
    database: ${REDIS_DATABASE:0}
    # timeout: 2000
    # pool:
    #   max-active: 20
    #   max-idle: 8
    #   min-idle: 2
    #   max-wait: 3000

三、排查过程

1.查看Redis CPU

CPU 在 60-70,相对高位,但也不是最高位,需要查看引起 CPU 高的原因

2.ping 延迟的异常

ping 主节点的时候发现部分耗时在 5ms 左右,很不符合预期,怀疑可能是网卡问题导致的业务访问慢,由于从节点 ping 正常,于是对 Redis 进行了主从切换,但是切换后新主的耗时也在 5ms 左右,排除网卡问题,可能是 CPU 过高导致的延迟异常

3.CPU 异常排查

查看命令的监控并进行 monitor 采集,发现 auth 的命令高达 1w/s,且都是业务的 ip 访问,这事不符合连接池的访问现象的,于是业务对代码进行了改造,符合了连接池的配置,改造后 auth 的命令次数每秒只有 1-2 次,CPU 也已经从 60% 下降到 20%,业务访问耗时完全正常了

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值