该主机与 Cloudera Manager Server 失去联系的时间过长。 该主机未与 Host Monitor 建立联系

该主机与 Cloudera Manager Server 失去联系的时间过长。 该主机未与 Host Monitor 建立联系

这个去集群主机cm界面上看会出现这个错误

排查思路:

  1. 一般比较常见的原因可能是出问题的主机和集群主节点的时间对应不上了。
  2. 还有就是cm agent服务出现问题了

去该主机的后台进行查看

1.1 如果集群配置了ntp时间同步协议

查看问题节点的ntp服务是否正常启动

复制代码
systemctl status ntpd

root@cloudcdp02 \~\]# systemctl status ntpd ● ntpd.service - Network Time Service Loaded: loaded (/usr/lib/systemd/system/ntpd.service; enabled; vendor preset: disabled) Active: active (running) since 一 2024-03-25 00:53:52 CST; 1 weeks 3 days ago Process: 717 ExecStart=/usr/sbin/ntpd -u ntp:ntp $OPTIONS (code=exited, status=0/SUCCESS) Main PID: 726 (ntpd) CGroup: /system.slice/ntpd.service └─726 /usr/sbin/ntpd -u ntp:ntp -g 3月 25 00:53:52 cloudcdp02.hadoop.com ntpd\[726\]: 0.0.0.0 c012 02 freq_set kernel 4.576 PPM 3月 25 00:53:52 cloudcdp02.hadoop.com systemd\[1\]: Started Network Time Service. 3月 25 00:53:57 cloudcdp02.hadoop.com ntpd\[726\]: Listen normally on 4 eth0 172.21.32.231 UDP 123 3月 25 00:53:57 cloudcdp02.hadoop.com ntpd\[726\]: Listen normally on 5 eth0 fe80::f87f:eaff:fe8b:1600 UDP 123 3月 25 00:53:57 cloudcdp02.hadoop.com ntpd\[726\]: new interface(s) found: waking up resolver 3月 25 00:58:21 cloudcdp02.hadoop.com ntpd\[726\]: 0.0.0.0 c61c 0c clock_step +0.293029 s 3月 25 00:58:21 cloudcdp02.hadoop.com ntpd\[726\]: 0.0.0.0 c614 04 freq_mode 3月 25 00:58:22 cloudcdp02.hadoop.com ntpd\[726\]: 0.0.0.0 c618 08 no_sys_peer 3月 25 01:14:01 cloudcdp02.hadoop.com ntpd\[726\]: 0.0.0.0 c612 02 freq_set kernel 4.919 PPM 3月 25 01:14:01 cloudcdp02.hadoop.com ntpd\[726\]: 0.0.0.0 c615 05 clock_sync

这种是正常已经启动好的
如果没有启动,就重启一下ntp服务

复制代码
systemctl start ntpd

在查看一下ntp是否与主节点进行时间同步

复制代码
ntpq -p

可以看到remote下面的主机前面有一个*,代表着正在与cloudcdp01进行时间同步,如果 *在local前面,就代表着与本地时间同步

如果offset下面的数字时间偏差太大的话,光靠ntp可能回不过来,这时候需要手动和主节点进行时间同步
手动同步命令

复制代码
ntpdate -s 主节点ip

重启agent服务

复制代码
 systemctl restart cloudera-scm-agent.service

1.2. 如果集群没有配置了ntp时间同步协议

查看主节点的时间

复制代码
date

然后在回到问题节点上面,直接修改问题节点的系统时间,让其与之同步
同步时间

复制代码
sudo date -s "2024-04-02 12:30:00"

重启agent服务

复制代码
 systemctl restart cloudera-scm-agent.service

2.如果agent服务出现问题

查看agent服务状态

复制代码
 systemctl status cloudera-scm-agent.service

如果发现agent服务停止就重新启动一下,如果发现agent服务没有了,就需要重新安装agent服务

重新安装agent服务,直接从主节点的/var/www/html里面发一份agent服务安装包,rpm安装一下就好了

服务安装好后,需要修改agent服务的配置文件,不然会出现agent服务无法识别主机的报错

修改agent服务的配置

复制代码
#进入配置服务目录
cd /etc/cloudera-scm-agent
#打开配置文件
vim config.ini

修改server_host后面的地址,把localhoust改为主节点ip。

然后重启agent服务

复制代码
 systemctl restart cloudera-scm-agent.service
相关推荐
得物技术12 小时前
深入剖析Spark UI界面:参数与界面详解|得物技术
大数据·后端·spark
武子康13 小时前
大数据-238 离线数仓 - 广告业务 Hive分析实战:ADS 点击率、购买率与 Top100 排名避坑
大数据·后端·apache hive
武子康1 天前
大数据-237 离线数仓 - Hive 广告业务实战:ODS→DWD 事件解析、广告明细与转化分析落地
大数据·后端·apache hive
碳基沙盒2 天前
OpenClaw 多 Agent 配置实战指南
运维
大大大大晴天2 天前
Flink生产问题排障-Kryo serializer scala extensions are not available
大数据·flink
武子康4 天前
大数据-236 离线数仓 - 会员指标验证、DataX 导出与广告业务 ODS/DWD/ADS 全流程
大数据·后端·apache hive
蝎子莱莱爱打怪4 天前
Centos7中一键安装K8s集群以及Rancher安装记录
运维·后端·kubernetes
武子康5 天前
大数据-235 离线数仓 - 实战:Flume+HDFS+Hive 搭建 ODS/DWD/DWS/ADS 会员分析链路
大数据·后端·apache hive
DianSan_ERP5 天前
电商API接口全链路监控:构建坚不可摧的线上运维防线
大数据·运维·网络·人工智能·git·servlet
够快云库5 天前
能源行业非结构化数据治理实战:从数据沼泽到智能资产
大数据·人工智能·机器学习·企业文件安全