MasterConnectionPool no available Redis entries

?? IT 码农 本文由博客端 http://www.chaiguanxin.com 主动推送
本贴最后更新于 283 天前,其中的信息可能已经时移世改

背景

线上报了 Rocketmq 消息堆积的报警,排查下来,发现是因为消费者那边调用 redis 导致的,具体的错误如下:

org.redisson.client.RedisConnectionException: MasterConnectionPool no available Redis entries.  Hosts disconnected due to `failedAttempts` limit reached: [xxxxx:6379]
        at org.redisson.connection.pool.ConnectionPool.get(ConnectionPool.java:196) ~[redisson-2.10.3.jar:na]
        at org.redisson.connection.pool.MasterConnectionPool.get(MasterConnectionPool.java:31) ~[redisson-2.10.3.jar:na]
        at org.redisson.connection.MasterSlaveEntry.connectionWriteOp(MasterSlaveEntry.java:417) ~[redisson-2.10.3.jar:na]
        at org.redisson.connection.MasterSlaveConnectionManager.connectionWriteOp(MasterSlaveConnectionManager.java:706) ~[redisson-2.10.3.jar:na]
        at org.redisson.command.CommandAsyncService.async(CommandAsyncService.java:506) ~[redisson-2.10.3.jar:na]
        at org.redisson.command.CommandAsyncService$8.run(CommandAsyncService.java:585) ~[redisson-2.10.3.jar:na]
        at io.netty.util.HashedWheelTimer$HashedWheelTimeout.expire(HashedWheelTimer.java:663) ~[netty-common-4.1.15.Final.jar:4.1.15.Final]
        at io.netty.util.HashedWheelTimer$HashedWheelBucket.expireTimeouts(HashedWheelTimer.java:738) ~[netty-common-4.1.15.Final.jar:4.1.15.Final]
        at io.netty.util.HashedWheelTimer$Worker.run(HashedWheelTimer.java:466) ~[netty-common-4.1.15.Final.jar:4.1.15.Final]
        at java.lang.Thread.run(Thread.java:748) ~[na:1.8.0_192]

 host xxxxx:6379 disconnected due to failedAttempts=3 limit reached
org.redisson.client.RedisTimeoutException: Command execution timeout for xxxxx:6379
        at org.redisson.client.RedisConnection$2.run(RedisConnection.java:212) ~[redisson-2.10.3.jar:na]
        at io.netty.util.concurrent.PromiseTask$RunnableAdapter.call(PromiseTask.java:38) ~[netty-common-4.1.15.Final.jar:4.1.15.Final]
        at io.netty.util.concurrent.ScheduledFutureTask.run(ScheduledFutureTask.java:120) ~[netty-common-4.1.15.Final.jar:4.1.15.Final]
        at io.netty.util.concurrent.AbstractEventExecutor.safeExecute(AbstractEventExecutor.java:163) [netty-common-4.1.15.Final.jar:4.1.15.Final]
        at io.netty.util.concurrent.SingleThreadEventExecutor.runAllTasks(SingleThreadEventExecutor.java:403) [netty-common-4.1.15.Final.jar:4.1.15.Final]
        at io.netty.channel.nio.NioEventLoop.run(NioEventLoop.java:463) [netty-transport-4.1.15.Final.jar:4.1.15.Final]
        at io.netty.util.concurrent.SingleThreadEventExecutor$5.run(SingleThreadEventExecutor.java:858) [netty-common-4.1.15.Final.jar:4.1.15.Final]
        at io.netty.util.concurrent.DefaultThreadFactory$DefaultRunnableDecorator.run(DefaultThreadFactory.java:138) [netty-common-4.1.15.Final.jar:4.1.15.Final]
        at java.lang.Thread.run(Thread.java:748) [na:1.8.0_192]

分析

经过排查,发现这个是 RedissonClient 的一个 bug,官方已经在 2.10.4 版本修复了,但是我们系统用的版本是 2.10.3,官方问题地址:Issue #1092 · redisson/redisson

解决

对 redisson 的版本进行升级

  • Redis

    Redis 是一个开源的使用 ANSI C 语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value 数据库,并提供多种语言的 API。从 2010 年 3 月 15 日起,Redis 的开发工作由 VMware 主持。从 2013 年 5 月开始,Redis 的开发由 Pivotal 赞助。

    250 引用 • 244 回帖 • 568 关注

欢迎来到这里!

我们正在构建一个小众社区,大家在这里相互信任,以平等 • 自由 • 奔放的价值观进行分享交流。最终,希望大家能够找到与自己志同道合的伙伴,共同成长。

注册 关于
请输入回帖内容 ...