一次生产zookeeper sessionMovedException排查分析

原创 已于 2022-04-27 22:10:13 修改 · 1.4k 阅读 · 1
标签
#zookeeper #分布式 #云原生
于 2021-06-07 14:46:28 首次发布
本文详细分析了一次生产环境中遇到的Zookeeper sessionMovedException问题，深入探讨了异常产生的原因，包括客户端使用multi操作时的问题。针对此异常，提出了两种解决方案：升级Zookeeper到3.6版本或复制3.6版本的修复代码到现有版本。经过测试验证，通过后者成功解决了问题。

集群架构

首先介绍一下我们生产zookeeper的集群架构，生产zookeeper集群采用3机房5个节点部署，3机房分别部署2-2-1个节点,客户端使用curator框架与zookeeper集群通信。

生产问题

1.网络抖动情况下客户端发生了session moved异常,这个问题只要一出现，之后的所以请求客户端都会收到session moved异常，异常信息如下：

16:56:05 ERROR [soa_roomviewers_s10_1_175_111_16024_PullJob-Quartz-worker]c.v.s.j.b.AbstractElasticJob - [PullJob] msg=org.apache.zookeeper.KeeperException$SessionMovedException: KeeperErrorCode = Session moved

com..job.exception.RegException: org.apache.zookeeper.KeeperException$SessionMovedException: KeeperErrorCode = Session moved

       ..........

        at java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511)

        at java.util.concurrent.FutureTask.run(FutureTask.java:266)

        at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1142)

        at 
最低0.47元/天 解锁文章
已解决org.apache.zookeeper.KeeperException.SessionMovedException异常的正确解决方法，亲测有效！！！
小明的Java问道之路
03-20 1832
已解决org.apache.zookeeper.KeeperException.SessionMovedException异常的正确解决方法，亲测有效！！！
解决org.apache.zookeeper.KeeperException$SessionExpiredException: KeeperErrorCode
perfer258的博客
08-18 2万+
问题描述 每次一运行MapReduce作业向HBase里面写数据，主节点的HMaster和HRegioServer进程就会挂掉。查看HBase日志发现， WARN  [PEWorker-1] coordination.SplitLogManagerCoordination: Failed to check remaining tasks org.apache.zookeeper.KeeperE...
Zookeeper服务端会话
荣耀之路
12-31 281
Zookeeper服务端会话
【java报错已解决】org.apache.zookeeper.KeeperException.SessionMovedException
最新发布
鸽芷咕的博客
11-25 1465
在Java开发的分布式系统领域，Apache Zookeeper是一款极为重要的协调服务工具。然而，就像任何复杂的技术一样，在使用过程中难免会遇到各种各样的报错情况。今天我们要聚焦的是org.apache.zookeeper.KeeperException.SessionMovedException这个报错，它常常会让开发者和环境配置者感到困惑，因为它涉及到Zookeeper会话的异常移动情况，可能对分布式系统的正常运行产生影响。那么，接下来我们就深入剖析这个报错，探寻有效的解决办法，帮助大家顺利解决此类问
Kafka自带zookeeper报错
JesJiang的博客
04-15 4534
1、Kafka自带zookeeper报错INFO Got user-level KeeperException when processing xxx Error Path:/brokers Error:KeeperErrorCode = NodeExists for /brokers (org.apache.zookeeper.server.PrepRequestProcessor) 问题描述：...
升级spring boot异常：连接zookeeper连接异常
CutelittleBo的博客
01-14 1878
问题 curator从2.12.0升级到5.2.0 zookeeper被升级到3.6.3了，放到服务器运行项目报错： Unable to read additional data from server sessionid 0x101100ff7f2000a, likely server has closed socket 或者 KeeperException$UnimplementedException: KeeperErrorCode = Unimplemented for 原因 当升级curator5
zookeeper日志中Error KeeperErrorCode NoNode 错误的排查过程
super_scan的专栏
05-11 3682
一、需求背景zookeeper日志中出现不少以下类似错误：2021-05-11 09:03:28,004 [myid:3] - INFO [ProcessThread(sid:3 cpo...
kafka发送超时
weixin_38071106的博客
02-25 3774
启动zk之后，再启动kafka报异常：   zk异常  Got user-level KeeperException when processing sessionid:0x100001216130001 type:delete cxid:0x14a zxid:0x4c69d txntype:-1 reqpath:n/a Error Path:/admin/preferred_replica...
【Java】已解决：org.apache.zookeeper.KeeperException.SessionMovedException
屿小夏.的知识博客
09-07 565
场景：假设我们有一个分布式应用程序，使用ZooKeeper进行配置管理和协调。如果ZooKeeper集群发生网络分区或其中一个服务器实例宕机，可能会导致会话被移动，从而引发。是在使用Apache ZooKeeper进行分布式系统协调时常见的异常之一。通过上述代码，我们可以在会话过期或被移动时重新连接ZooKeeper集群，确保应用程序的稳定性。在上述代码中，如果ZooKeeper服务器发生故障或网络分区，会话可能会被移动，从而抛出。报错问题，确保ZooKeeper客户端的稳定运行。
kafka常见异常问题总结：KeepErrorCode = NoNode for...
神芷迦蓝寺
04-01 1万+
主要异常 kafka是我们常见的数据订阅中间件系统，但清除累计的日志文件也是件技术活 笔者在清除日志的时候，不小心把zookeeper log 目录下version-2里的文件删除了，就引发了一系列惨案： kafka数据报错，无法再产生数据，报错详情: kafka报错： Error Path:/admin Error:KeeperErrorCode = NoNode for /brokers Error Path:/admin Error:KeeperErrorCode = NoNode for
zookeeper频繁异常问题分析
weixin_30748995的博客
11-27 1928
Reference:https://blog.csdn.net/xjping0794/article/details/77784171 1.1操作系统信息1.1.1CPU信息 从上述可以看出在问题点CPU使用率并不高，故排除CPU问题。 1.1.2内存信息 CM监控界面并无内存信息，无法提供图片。 但问题期间...
zookeeper使用过程的错误
denghe4720的博客
05-24 2951
一、zookeeper启动成功，dubbo服务也注册成功，但是服务消费者调用失败 报错如下： [myid:] - INFO [SyncThread:0:ZooKeeperServer@645] - Established session 0x16ae75366b60004 with negotiated timeout 40000 for client /127.0.0.1:5094...
zookeeper Error:KeeperErr orCode = NodeExists
热门推荐
MyNoteBlog的博客
02-21 2万+
项目中采用dubbo远程调用框架,本地启动加载dubbo.xml配置文件时,zookeeper打印错误日志,如下： ath:/dubbo/com.mk.base.api..UserLoginService/providers Error: KeeperErrorCode = NodeExists for /dubbo/com.mk.base.api..UserLoginS ervice/prov
org.apache.zookeeper.KeeperException$ConnectionLossException: KeeperErrorCode =ConnectionLoss for /
m0_46775974的博客
02-26 2097
出现上述问题的有以下几个解决方案： 看防火墙是否关闭 使用的云服务器连接的，看安全组是否放行2181端口 private int sessionTimeout = 20000;会话时间可以设置长一些 zookeeper版本对应jar是否正确 <dependency> <groupId>org.apache.zookeeper</groupId> <artifactId>zookeeper</artifactId&gt
运行hbase时zookeepersession超时问题：KeeperErrorCode = Session expired for /hbase/master
既然选择了-何必在意的专栏
10-31 2万+
工作中运行hbase报的zookeeper异常信息： 2013-06-28 18:26:59,946 WARN org.apache.hadoop.hbase.zookeeper.ZKUtil: master:60000-0x33f7eb9d0650002-0x33f7eb9d0650002-0x33f7eb9d0650002 Unable to get data of znode /hba
zookeeper错误码以及常见问题
MyObject-C的专栏
08-13 1万+
Zookeeper C API 错误码介绍 ZOO_ERRORS ZOK  正常返回 ZSYSTEMERROR  系统或服务器端错误(System and server-side errors)，服务器不会抛出该错误，该错误也只是用来标识错误范围的，即大于该错误值，且小于 ZAPIERROR 都是系统错误。 ZRUNTIMEINCONSISTE...
ZooKeeper系统模型之会话重连。
孤芳不自赏
02-27 1666
        当客户端和服务端之间的网络连接断开时，ZooKeeper客户端会自动进行反复的重连，直到最终成功连接上ZooKeeper集群中的一台机器。在这种情况下，再次连接上服务端的客户端有可能会处于以下两种状态之一。 CONNECTED：如果在会话超时时间内重新连接上了ZooKeeper集群中任意一台机器，那么被视为成功。 EXPIRED：如果是在会话超时时间以外重新连接上，那么服务端其...
Dubbo注册到zookeeper报错
chunguang.yao的博客
06-29 2341
最近在学习Dubbo的知识，就做一个入门小demo，但是一直报错，很懊恼。 本来是一个简单的客户端调用服务端的例子，但是一直访问不到。报错如下 严重: StandardWrapper.Throwable org.springframework.beans.factory.BeanCreationException: Error creating bean with name 'userCon...
ZooKeeper session管理
宁静致远
11-17 6596
ZooKeeper的每个客户端都维护一组服务端信息，在创建连接时由应用指定，客户端随机选择一个服务端进行连接，连接成功后，服务端为每个连接分配一个唯一标识。客户端在创建连接时可以指定溢出时间，客户端会周期性的向服务端发送PING请求来保持连接，当客户端检测到与服务端断开连接后，客户端将自动选择服务端列表中的另一个服务端进行重连。客户端允许应用修改服务端列表，但修改可能导致客户端与服务端的重连。连接状
评论 3
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值