目录

cdp集群Hbase组件HRegionServer服务停止原因以及排查

前言:重启集群后某一节点HRegionServer服务停止,重启前所有服务均正常

去查看日志:

日志报错

ERROR HRegionServer

Master rejected startup because clock is out of sync

org.apache.hadoop.hbase.ClockOutOfSyncException: org.apache.hadoop.hbase.ClockOutOfSyncException: Server cloudcdp05.hadoop.com,16020,1713404049250 has been rejected; Reported time is too far out of sync with master. Time difference of 31113ms > max allowed of 30000ms

09:34:20.321 ERROR HRegionServerCommandLine

Region server exiting

java.lang.RuntimeException: HRegionServer Aborted

HBase 主节点拒绝了某个区域服务器的启动,因为区域服务器的系统时钟与主节点的系统时钟相差太大。

去查看对应节点后台,发现ntp服务正常启动,但是没有与主节点进行时间同步

怀疑是主节点ntp服务没启起来,去主节点查看ntp是active状态,

可能是没识别问题节点,把主节点和问题节点的ntp服务重启一下就好了

powershell 复制代码
#重启ntp服务
systemcl restart ntpd

后续查看同步状态

powershell 复制代码
ntp -q

可以看到时间同步过去了,问题解决。

本文是转载文章,点击查看原文
如有侵权,请联系 xyy@jishuzhan.net 删除
相关推荐
照书抄代码13 分钟前
Linux中用gdb查看coredump文件
linux·运维·服务器
czhc114007566315 分钟前
Linux2 CD LL hostnamectl type mkdir dudo
运维·服务器
ℳℓ白ℳℓ夜ℳℓ29 分钟前
Linux网络应用层自定义协议与序列化
linux·运维·服务器
江沉晚呤时35 分钟前
如何深入理解C#中的备忘录模式(Memento Pattern)设计模式
运维·服务器·数据库·c#·.netcore
23zhgjx-hyh1 小时前
IS-IS认证
运维·服务器·网络
日出等日落1 小时前
CasaOS小主机本地安装1Panel运维面板结合内网穿透移动端远程运维
运维
RLG_星辰1 小时前
第二章日志分析-mysql应急响应笔记
运维·数据库·mysql·应急响应·玄机
无名之逆1 小时前
在Rust生态中探索高性能HTTP服务器:Hyperlane初体验
运维·服务器·开发语言·后端·http·rust·自动化
刘若水1 小时前
Linux : 页表
linux·运维·服务器
niuTaylor2 小时前
嵌入式Linux驱动开发基础知识(三)
linux·运维·驱动开发