是什么阻断了kafka与zk的链接?

转载说明:如果您喜欢这篇文章并打算转载它,请私信作者取得授权。感谢您喜爱本文,请文明转载,谢谢。


问题描述:

前几天部署一套环境,先把zk集群起来了,之后第二天在启动kafka的时候,报错了,提示连不上zk。报错:

复制代码
 Unable to connect to zookeeper server '10.0.12.10:2181,10.0.12.12:2181,10.0.12.13:2181' with timeout of 6000 ms

原因分析:

  1. 查看kafka的配置,并未发现任何异常。

  2. 然后检查zk自身是否OK,看了三台集群节点的进程、端口都一切正常。但是在使用./zkCli.sh去检查zk的集群状态时,发现了异常,发现集群节点之间相互不通信。

  3. 在三套zk节点上商户telnet检查端口,果然端口不通。

  4. 因三台服务器均在同一个网段下,检查防火墙,发现三台服务器的防火墙被人启动了,所以导致了zk集群之间相互端口不通。

解决方案:

1. 关闭防火墙

因三台机器都是内网使用机器,不对外通信,因此关闭防火墙即可。

2. 保留防火墙开端口

如在某些情况下,端口必读开启,则可以通过防火墙命令放开zk、kafka之前的所有通信端口:

复制代码
[root@host-10-0-12-13 ~]#  firewall-cmd --list-ports
 3888/tcp 2181/tcp 2888/tcp  9092/tcp 
[root@host-10-0-12-13 ~]#

补充:

zk三个端口的作用:

  • 2181:对cline端提供服务
  • 3888:选举leader使用
  • 2888:集群内机器通讯使用(Leader监听此端口)

欢迎关注SRE成长记一起探讨学习!↓↓↓

相关推荐
重生之绝世牛码5 分钟前
Linux软件安装 —— kafka集群安装(SASL密码验证)
大数据·linux·运维·服务器·分布式·kafka·软件安装
填满你的记忆44 分钟前
【从零开始——Redis 进化日志|Day5】分布式锁演进史:从 SETNX 到 Redisson 的完美蜕变
java·数据库·redis·分布式·缓存
無森~1 小时前
ZooKeeper
分布式·zookeeper·云原生
小北方城市网1 小时前
SpringBoot 集成 MinIO 实战(对象存储):实现高效文件管理
java·spring boot·redis·分布式·后端·python·缓存
Blossom.1181 小时前
大模型分布式训练通信优化:从Ring All-Reduce到分层压缩的实战演进
人工智能·分布式·python·深度学习·神经网络·机器学习·迁移学习
谷新龙0011 小时前
kafka工作原理
kafka
码农水水2 小时前
得物Java面试被问:大规模数据的分布式排序和聚合
java·开发语言·spring boot·分布式·面试·php·wpf
爱吃提升2 小时前
分布式爬虫的核心原理详细介绍
分布式·爬虫
無森~2 小时前
Hadoop序列化与反序列化
大数据·hadoop·分布式
这儿有个昵称3 小时前
Java面试场景:从音视频到微服务的技术深挖
java·spring boot·spring cloud·微服务·面试·kafka·音视频