HBase高可用HMaster进入Active状态重复重启失败，由MasterProcWals状态日志过多导致Master重复失败

最新推荐文章于 2026-03-29 03:23:42 发布
原创 最新推荐文章于 2026-03-29 03:23:42 发布 · 1.4k 阅读 · 0
标签
#hbase #hadoop #大数据
本文围绕HBase高可用HMaster进入Active状态重复重启失败问题展开。问题表现为CDH下Hbase无Active的Master等，原因是MasterProcWals状态日志过多致启动超时崩溃。解决过程包括查看目录大小、移动数据、检查命令、处理zookeeper信息、重启集群等，最终Hbase恢复正常。

开发板推荐：天空星STM32F407VET6开发板

超高性价比 STM32主控 | 超高主频 | 一板兼容百芯 | 比赛神器 | 沉金彩色丝印

点击查看

HBase高可用HMaster进入Active状态重复重启失败

问题描述：

CDH下服务角色列表Hbase中没有Active的Master；
集群告警提示 “未见活动的Master” ；
Hbase的Master WebUI中查看Current Active Master主机,实际状态为 “backup” ；
Hbase节点 /var/log/hbase/ 目录下查看日志；
报错信息：FileSystem closed

导致问题的原因:

由于某些已知存在的问题，会导致MasterProcWals状态日志过多，如果重启HBase Master，可能会导致HBase Master启动失败。因为HBase Master进入活动状态需要读取并实例化所有正在运行的程序当前记录在/hbase/MasterProcWALs/目录下对应的文件。如果此文件夹太大，HBase Master将在完全变为活动状态之前超时并崩溃。

解决过程

1.查看/hbase/MasterProcWALs目录占用HDFS存储空间大小：

// 查看目录占用HDFS存储空间大小
hdfs dfs -du -s -h /hbase/MasterProcWALs

开发板推荐：天空星STM32F407VET6开发板

超高性价比 STM32主控 | 超高主频 | 一板兼容百芯 | 比赛神器 | 沉金彩色丝印

点击查看
最低0.47元/天 解锁文章
【大数据入门核心技术-HBase】（十一）HBase手动清除表相关信息
12-16 1103
一、Hbase2.2.2相关步骤。二、Hbase1.*相关步骤。Hbase2.2.2相关步骤一、Hbase2.2.2相关步骤。二、Hbase1.*相关步骤。一、Hbase2.2.2相关步骤。二、Hbase1.*相关步骤。一、Hbase2.2.2相关步骤。二、Hbase1.*相关步骤。一、Hbase2.2.2相关步骤。二、Hbase1.*相关步骤。一、Hbase2.2.2相关步骤。二、Hbase1.*相关步骤。
展讯AT指令全解析：从基础操作到高级调试
最新发布
weixin_30275415的博客
03-29 500
本文全面解析展讯AT指令的使用方法，从基础操作如模组型号查询(`AT+CGMM`)和信号检测(`AT+CSQ`)，到高级功能如APN设置(`AT+CGDCONT`)和VoLTE配置(`AT+CAVIMS?`)。通过实战案例和调试技巧，帮助开发者快速掌握展讯平台的核心指令，解决网络配置、日志抓取等常见问题，提升物联网设备开发效率。
ERROR [master/jinghang01:16000:becomeActiveMaster] master.HMaster: Failed to become active master
yang灬仔
10-12 3825
配置好hbase-site.xml ，启动hbase，查看日志出现问题。 2020-10-12 17:01:36,126 INFO [master/jinghang01:16000:becomeActiveMaster] wal.ProcedureWALFile: Archiving hdfs://jinghang01:9000/hbase/MasterProcWALs/pv2-00000000000000000002.log to hdfs://jinghang01:9000/hbase/oldW..
HBase | oldWALs目录文件剧增占用磁盘空间问题
俗人
02-25 3748
出现问题原因： 当/hbase/WALs中的HLog文件被持久化到存储文件中，且这些Hlog日志文件不再被需要时，就会被转移到{hbase.rootdir}/oldWALs目录下，该目录由HMaster上的定时任务负责定期清理。 HMaster在做定期清理的时候首先会检查zookeeper中/hbase/replication/rs下是否有对应的复制文件，如果有就放弃清理，如果没有就清理对应的...
Hbase简介
码灵的博客
03-21 3650
特性 Hbase是一种NoSQL数据库，这意味着它不像传统的RDBMS数据库那样支持SQL作为查询语言。Hbase是一种分布式存储的数据库，技术上来讲，它更像是分布式存储而不是分布式数据库，它缺少很多RDBMS系统的特性，比如列类型，辅助索引，触发器，和高级查询语言等待。那Hbase有什么特性呢？如下： 强读写一致，不是“最终一致性”的数据存储，这使得它非常适合高速的计算聚合 自动分片，通过Region分散在集群中，当行数增长的时候，Region也会自动的切分和再分配 自动的故障转移 Hadoop
关于HABSE
qq_41253208的博客
02-12 1343
1.1 hbase数据库介绍 1、简介 hbase是bigtable的开源java版本。是建立在hdfs之上，提供高可靠性、高性能、列存储、可伸缩、实时读写nosql的数据库系统。(储冷数据：是对于离线类不经常访问的数据，比如企业备份数据、业务与操作日志数据、话单与统计数据。)(热数据：是需要被计算节点频繁访问的在线类数据。) 它介于nosql(非关系型数据库)和RDBMS(关系型数据库)之间，仅...
【总结】hbase master重启恢复失败问题修复
Java高手真经
04-24 1635
查阅了一番资料，最终定位到是MasterProcWals pv日志过多，在重启HBase Master 的过程中，HBase Master进入活动状态需要读取并实例化所有正在运行的程序当前记录在/apps/hbase/data/MasterProcWALs/目录下对应的文件。于是想着先重启一把，在hbase master 选主成active状态的过程中，发现重启多次都很漫长，且最终因重启时间过长，被hbase-daemon.sh 强杀掉。但最近再次宕机，一直加大jvm内存也不现实。至此，成功解决该问题。
HMaster启动选主超时，长时间没有master服务
weixin_44154134的博客
07-15 767
1.现象描述 集群修改参数后，需要hbase服务进行重启，发现重启后主master一直未选主成功 2.原因分析 查看hbase-master日志,发现日志一直在刷如下日志： 查看/hbase/MasterProcWALs/下的日志文件及大小，发现日志文件差不多共112W个，日志大小约4.5T hadoop fs -ls /hbase/MasterProcWALs/ hadoop fs -du -s -h /hbase/MasterProcWALs master在选主过程中会回放MasterProcW
1.3 HBase 基本架构
Wzideng@qq.com
04-29 1309
把 master 需要执行的任务记录到预写日志 WAL 中，如果 master 宕机，让 backupMaster。（2）拆分合并 region 的实际执行者，有 master 监控，有 regionServer 执行。HDFS 为 Hbase 提供最终的底层数据存储服务，同时为 HBase 提供高容错的支持。（2）监控 region 是否需要进行负载均衡，故障转移和 region 的拆分。（1）负责数据 cell 的处理，例如写入数据 put，查询数据 get 等。有 meta 表的位置信息。
Hbase服务故障恢复后快速解决region负载不均衡的问题
jingyi1219的博客
04-12 2547
此解决方案的适用场景： hbase故障前region平均的分布在所有的regionserver上面，故障发生后，HbaseMaster挂掉，部分或全部regionserver挂掉，当hbase个组件都恢复后，会发现大量的region是在少数regionserver上，如果你集群开启了region自动均衡，需要等待特别长的时间，特别是hbase集群规模很大时，比如我们一个项目的hbase集群有200个regionserver，region数目达到了10W+，如果要等hbase自己让region负载均衡，需要
HBase---浅谈HBase原理
大呱的博客
03-07 535
浅谈HBase原理
HBase hmaster无法正常启动，日志报错Operation category READ is not supported in state standby.hdfs ha hbase配置修改
隔壁的泰山的博客
12-19 690
HBase hmaster无法正常启动，日志报错Operation category READ is not supported in state standby. hdfs配置了ha，hbase.rootdir配置。
hbase在hdfs上的详细目录结构
L
10-27 7967
hbase目录结构如图：  列出/hbase目录下的所有目录和文件，结构如下： drwxr-xr-x - root supergroup 0 2018-10-27 18:26 /hbase/.tmp drwxr-xr-x - root supergroup 0 2018-10-27 18:26 /hbase/.tmp/data drwxr-xr...
高可用Hbase集群环境安装
lihongbao80的专栏
06-16 737
高可用Hbase集群环境安装 1、在hadoop2.0中通常由两个NameNode组成，一个处于active状态，另一个处于standby状态。Active NameNode对外提供服务，而Standby NameNode则不对外提供服务，仅同步active namenode的状态，以便能够在它失败时快速进行切换。 hadoop2.0官方提供了两种HDFS HA的解决方案，一种是NFS，另一种是QJM。这里我们使用简单的QJM。在该方案中，主备NameNode之间通过一组JournalNode同步元数据信息
hbase关于hmaster无法启动
热门推荐
ttusihs的博客
08-01 1万+
hbase关于hmaster无法启动
hbase参数调整
测试工程师Eric的路...
05-07 3009
简单的参数调整，适合初级学习 1.hbase中hfile的默认最大值(hbase.hregion.max.filesize) 256MB  --10GB？？ 根据结果得到如下结论：值越小，平均吞吐量越大，但吞吐量越不稳定；值越大，平均吞吐量越小，吞吐量不稳定的时间相对更小。 2. autoflush=false的影响 2M(hbase.client.write.buffer决
Hbase中Hmaster启动失败的原因
RayfunC的博客
02-16 1万+
在启动 Hbase 后，发现没有 Hmaster 进程的现象， 并且导致 Hbase shell 启动后操作报 Can't get master address from ZooKeeper; znode data == null 的错误 以及停止 Hbase 时出现 stopping hbasecat: /tmp/hbase-xxxxx-master.pid: 没有那个文件或目录 的错误 ...
HBase HMaster启动失败？5个常见配置错误及快速修复指南
flower的专栏
02-12 184
本文针对HBase HMaster启动失败的常见问题，提供了系统化的排查与修复指南。文章深入分析了端口冲突、ZooKeeper连接故障、HDFS路径权限、JVM内存配置不当等5个核心配置错误，并给出了具体的诊断步骤和解决方案，帮助运维人员快速定位并解决HMaster进程启动问题，确保集群稳定运行。
【HBase入门】10. HBase高可用、HBase架构、常见问题汇总
CSDNGuoYuying的博客
01-27 1400
考虑关于HBase集群的一个问题，在当前的HBase集群中，只有一个Master，一旦Master出现故障，将会导致HBase不再可用。所以，在实际的生产环境中，是非常有必要搭建一个高可用的HBase集群的。
Hbase 2.x Region in Transition 异常解决
luckysign的博客
03-16 1614
正式环境 hbase集群与多个中间件集群共用5台服务器导致这5台服务器整体资源使用紧张，内存、磁盘I/O一直处于上限附近，由于hbase节点挂掉后处理不得当，导致 存在HDFS上的数据块损坏，清理HDFS上的数据导致Hbase Region上的数据出现不一致，重启hbase集群后一直报错如下图： 例如：新建一个 对象，并将读取到的数据存入 ，然后 换成 。1、首先我们删除 hbase:meta 中的region元信息，该表已经不再在了，元信息也是没有用的垃圾数据。上图框中的内容就是存在 meta表中的ro
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值