阿里云Kafka分区清理

前言

1.业务中kafka默认分区数1000

  1. topic分区建立后,只能新增不能减少

删除无流量topic

1. 通过Prometheus监控,找到无流量分区

kafkaPrometheus监控

经过实践,该流量可能不准;需要二次校验

2.判断该topic订阅情况、消息消费情况

如果没有订阅情况,且没有消息记录

3. 删除该业务

降低测试topic分区数

topic分区数只能增加,不能降低。

在一般情况下,可将原本topic删除重建【2】分区的topic

待实践

相关推荐
Geek-Chow16 小时前
01 · Why AWS Lambda: Idle Cost, Capacity Planning and Risky In-Place Deploys
云计算
workflower18 小时前
超算中心聚焦高性能计算场景(HPC)
大数据·网络·人工智能·机器人·云计算·汽车
ha_lydms1 天前
Datetime Functions(日期时间函数)
大数据·hadoop·阿里云·spark·数据处理·dataworks·maxcompute
Wang's Blog1 天前
Java 项目实战: 交友项目 - 阿里云 OSS 入门案例:从创建 Bucket 到上传拿到可访问 URL
java·阿里云·交友
workflower1 天前
Agentic AI 时代的企业ICT 基础设施运维
运维·人工智能·机器学习·重构·云计算·汽车
ha_lydms1 天前
Bitwise Functions(位运算函数)
大数据·hadoop·阿里云·spark·数据处理·dataworks·maxcompute
Geek-Chow1 天前
00 · AWS Lambda 心智模型学习指南:总览、思维导图与阅读路线(专栏目录)
云计算
ha_lydms1 天前
St Functions(空间函数)
大数据·hadoop·阿里云·spark·数据处理·dataworks·maxcompute
我不会起名字3221 天前
Kafka 分区数到底设几个:吞吐量、顺序性与 rebalance 代价的取舍
kafka·消息队列·调优·分区
Geek-Chow1 天前
07 · AWS Lambda 自测题与动手实验:用 AWS CLI 验证版本、别名、预置并发与冷启动
云计算