【Azure Redis 缓存】Lettuce 连接到Azure Redis服务,出现15分钟Timeout问题

yellowone

关注

阅读 79

2023-03-02

问题描述

在Java应用中,使用 Lettuce 作为客户端SDK与Azure Redis 服务连接,当遇见连接断开后,长达15分钟才会重连。导致应用在长达15分的时间,持续报错Timeout

 

问题解答

这是 Lettuce 目前的一个未解决的已知问题,可以查看此 github issue来了解这个问题的背景:

  1. ​​https://github.com/StackExchange/StackExchange.Redis/issues/1848​​ (Connection does not re-establish for 15 minutes when running on Linux #1848)
  2. ​​https://github.com/lettuce-io/lettuce-core/issues/2082​​​ ( Add support for disconnect on timeout to recover early from no ​​RST​​ packet failures #2082) 

问题根源是 在于在某些时候Redis服务或者客户端由于网络原因等断掉TCP连接后,Lettuce会等待TCP重试15之后才丢弃该连接(重试15次是和操作系统 tcp_retries2 的配置有关),然后创建新的TCP连接,因此 Lettuce 不会立即重连而是等待15分钟后进行重连,造成了超时。

 

所以可以通过使用其他Redis的SDK来代替Lettuce(如 Jedis)。或者是根据微软官方文档介绍,修改Linux系统中的 tcp_retries2 参数值 (net.ipv4.tcp_retries2  为 5)。 

【Azure Redis 缓存】Lettuce 连接到Azure Redis服务,出现15分钟Timeout问题_redis

(参考:​​https://docs.azure.cn/zh-cn/azure-cache-for-redis/cache-best-practices-connection#tcp-settings-for-linux-hosted-client-applications​​)

 

可以通过以下的代码来复现 "Lettuce在Linux系统上超时15分钟" 问题

测试代码:

public class Main {
public static void main(String[] args) {
RedisClient client = RedisClient.create(RedisURI.Builder.redis("redis-hostname", 6379)
.withSsl(false)
.withPassword("xxxxxx")
// .withTimeout(Duration.ofSeconds(10))
.build());
client.setOptions(ClientOptions.builder()
// .socketOptions(socketOptions)
.autoReconnect(true)
.disconnectedBehavior(ClientOptions.DisconnectedBehavior.DEFAULT)
.build());

RedisCommands<String, String> sync = client.connect().sync();

for (int i = 0; i < 1000; i++) {
try {
Thread.sleep(1000);
} catch (InterruptedException e) {
throw new RuntimeException(e);
}

try {
System.out.println("========" + i);
sync.set("" + i, "" + i);

} catch (Exception e) {
System.out.println("eeeeeeee" + e.getMessage());
}
}
}
}

首先,将程序在Linux服务器运行,程序会循环往Redis Set一些值。

然后,人为操作,对Azure Redis进行重启操作。

最后,可以发现Lettuce客户端会持续Timeout,直到大约15分钟后才会和Redis进行重新连接。

 

 

参考资料

Azure Redis有关连接复原的最佳做法:​​https://docs.azure.cn/zh-cn/azure-cache-for-redis/cache-best-practices-connection#tcp-settings-for-linux-hosted-client-applications​​

 

当在复杂的环境中面临问题,格物之道需:浊而静之徐清,安以动之徐生。 云中,恰是如此!

精彩评论(0)

0 0 举报