是什么阻断了kafka与zk的链接?

转载说明:如果您喜欢这篇文章并打算转载它,请私信作者取得授权。感谢您喜爱本文,请文明转载,谢谢。


问题描述:

前几天部署一套环境,先把zk集群起来了,之后第二天在启动kafka的时候,报错了,提示连不上zk。报错:

复制代码
 Unable to connect to zookeeper server '10.0.12.10:2181,10.0.12.12:2181,10.0.12.13:2181' with timeout of 6000 ms

原因分析:

  1. 查看kafka的配置,并未发现任何异常。

  2. 然后检查zk自身是否OK,看了三台集群节点的进程、端口都一切正常。但是在使用./zkCli.sh去检查zk的集群状态时,发现了异常,发现集群节点之间相互不通信。

  3. 在三套zk节点上商户telnet检查端口,果然端口不通。

  4. 因三台服务器均在同一个网段下,检查防火墙,发现三台服务器的防火墙被人启动了,所以导致了zk集群之间相互端口不通。

解决方案:

1. 关闭防火墙

因三台机器都是内网使用机器,不对外通信,因此关闭防火墙即可。

2. 保留防火墙开端口

如在某些情况下,端口必读开启,则可以通过防火墙命令放开zk、kafka之前的所有通信端口:

复制代码
[root@host-10-0-12-13 ~]#  firewall-cmd --list-ports
 3888/tcp 2181/tcp 2888/tcp  9092/tcp 
[root@host-10-0-12-13 ~]#

补充:

zk三个端口的作用:

  • 2181:对cline端提供服务
  • 3888:选举leader使用
  • 2888:集群内机器通讯使用(Leader监听此端口)

欢迎关注SRE成长记一起探讨学习!↓↓↓

相关推荐
Thomas.Sir3 天前
第21课:PyTorch|GPU多卡训练与分布式训练基础【让多卡并行成为你的加速引擎】
人工智能·pytorch·分布式
Cicada1283 天前
库存消息消费的正确性设计——从幂等窗口到批量流水线
分布式·系统架构
Nano叶落3 天前
Kafka 消费积压排查入门:Docker 搭环境亲手制造一次 ‘消息堵死‘,10 分钟看懂 Lag
kafka
liangshanbo12154 天前
Redux 的中间件(Middleware)的工作机制
中间件·react·redux
今年下半年4 天前
SpringBoot整合金蝶中间件
spring boot·中间件·maven
Francek Chen4 天前
【大数据处理与分析】数据仓库Hive:04 数据仓库Hive概述
大数据·数据仓库·hive·hadoop·分布式
Gl�ria4 天前
Hadoop/YARN 集群缩容:下线DN节点
大数据·hadoop·分布式
吉甫作诵4 天前
Kafka 集群安装与运维实战:消费组排查、Offset 重置与副本重分配
大数据·运维·分布式·kafka·消息队列
青山木4 天前
RocketMQ 入门到原理(六):可靠性全景
java·后端·中间件·架构·rocketmq