K8S环境下验证RocketMQ扩缩容

背景

想验证一些K8S环境下RocketMQ扩缩容时的表现和特性,比如序号是否改变?命名规则是怎样的?删除和新增节点后序号怎么变化?

Broker

修改yaml中replicas扩容

delete删除节点,观察能否缩容,以及序号的变化

其中,节点被重建,且序号保持原序号。

kubectl scale指令扩缩容

c 复制代码
kubectl scale 命令,它是 kubectl set 命令的一个特例,专门用于修改资源的副本数量。

kubectl scale statefulsets rocketmq-broker-master --replicas=1 -n rocketmq

从2个master节点缩容为1个:

从2个master节点扩容为5个:

其中,可以看到扩容的过程是依次扩容,而非同时扩。

运行delete yaml指令后,所有broker节点均被删除

POD name序号变化和重启保持不变的原理

StatefulSet控制器创建的Pod副本会自动加上序号后缀。Pod的序号是按照它们被创建的顺序分配的,从0开始递增。StatefulSet特性摘抄:

顺序性:Pod的序号是按照它们被创建的顺序分配的,从0开始递增。 唯一性:每个Pod的名称在其整个生命周期中都是唯一的。

稳定性:StatefulSet确保Pod的序号在Pod重新调度或重建后保持不变,这是通过StatefulSet的Pod管理策略(OrderedReady或Parallel)来实现的。

一旦apply StatefulSet.yaml后,手动delete掉POD,POD会被重建。想彻底删除节点只能通过delete yaml的方式。

brokerName通过configmap从POD name中取序号后拼接broker-g。

configmap中这部分代码:

c 复制代码
  broker_name_seq=${HOSTNAME##*-}
  if [ -n "$MY_POD_NAME" ]; then
    broker_name_seq=${MY_POD_NAME##*-}
  fi
  update_broker_conf "brokerName" "broker-g${broker_name_seq}"

其中,取POD的-尾部序号作为broker_name_seq,与broker-g拼接作为brokerName。

(去除了yaml中共享存储的pvc挂载,由于测试需要手动构造本地相同目录的PVC,无法使用SC动态创建,会影响自动扩缩容。)

Proxy

proxy节点从2到4扩容

proxy由Deployment控制器创建,是无状态的。其创建的pod名称是没有序号连续的。

通过delete删除后也会重建新的pod name

proxy节点缩容,从4到2,发现虽然POD名称是随机的,但缩容也会按照新创建先缩容:

Deployment Pod name命名规则原理

随机名称:每个Pod的名称是由Kubernetes随机生成的,通常是一个五字符的随机字符串,这些字符可能是字母和数字的组合。

名称唯一性:尽管名称是随机生成的,但Kubernetes确保在同一个命名空间内每个Pod的名称是唯一的。

标签一致性:尽管Pod名称是随机的,但Pod的标签(labels)是一致的,并且与Deployment的标签选择器(selector)相匹配。这意味着你可以通过Deployment的标签选择器来管理和引用相关的Pod。

重启和重建:如果Pod由于任何原因(例如,缩放、更新、节点故障等)被重启或重建,新创建的Pod将获得一个新的随机名称。

相关推荐
Apache RocketMQ3 小时前
云原生事件驱动引擎(RocketMQ-EventBridge)应用场景与技术解析
云原生·消息队列·rocketmq·事件驱动引擎
不畏惧的少年4 小时前
RocketMQ核心概念
rocketmq
deeper_wind1 天前
k8s-单主机Master集群部署+单个pod部署lnmp论坛服务(小白的“升级打怪”成长之路)
云原生·容器·kubernetes
zhenshanrenhao1 天前
#买硬盘欲安装k8s记
云原生·容器·kubernetes
tb_first1 天前
k8sday09
linux·云原生·容器·kubernetes
稚辉君.MCA_P8_Java1 天前
豆包 Java的23种设计模式
java·linux·jvm·设计模式·kubernetes
悟能不能悟2 天前
MQ积压如何处理
java-rocketmq
40kuai2 天前
kubernetes中数据存储etcd
容器·kubernetes·etcd
Harvey_D2 天前
【部署K8S集群】 1、安装前环境准备配置
云原生·容器·kubernetes
Wezzer2 天前
k8s单master部署
云原生·容器·kubernetes