Kafka主题(Topic/文件夹)的操作

Kafka主题(Topic/文件夹)的操作

1、Kafka主题(Topic/文件夹)

注意:下方涉及topic的所有操作都是在kafka安装目录的bin文件夹下执行

bash 复制代码
/usr/local/kafka_2.13-3.7.0/bin

2、Kafka主题(Topic/文件夹)的一些操作

2.1、创建主题(Topic/文件夹)

bash 复制代码
./kafka-topics.sh --create --topic helloword --bootstrap-server localhost:9092

2.2、列出所有主题(Topic/文件夹)

bash 复制代码
./kafka-topics.sh --list  --bootstrap-server localhost:9092

2.3、删除主题(Topic/文件夹)

bash 复制代码
./kafka-topics.sh --list  --bootstrap-server localhost:9092

2.4、显示主题(Topic/文件夹)详细信息

bash 复制代码
./kafka-topics.sh --describe --topic helloword --bootstrap-server localhost:9092

2.5、修改主题(Topic/文件夹)分区数

bash 复制代码
./kafka-topics.sh --alter --topic helloword --partitions 5 --bootstrap-server localhost:9092

修改后的分区数是5

3、生产者:在Kafka主题(Topic/文件夹)中写事件的操作(./kafka-console-producer.sh)

3.1、查看如何使用写入事件的脚本

执行./kafka-console-producer.sh脚本可以查看如何往topic里边写入事件

bash 复制代码
./kafka-console-producer.sh

3.2、往主题中写入事件

执行如下命令可以往指定主题中写入事件:

  • 每次换行写入一个新的主题
  • 按ctrl+c结束
bash 复制代码
./kafka-console-producer.sh --topic helloword --bootstrap-server localhost:9092

4、消费者:从Kafka主题(Topic/文件夹)中读事件的操作(./kafka-console-consumer.sh)

4.1、不带任何参数执行脚本会告诉如何使用

bash 复制代码
./kafka-console-consumer.sh

4.2、从kafka指定topic中读取事件

注意:

  • 带上 --from-beginning 参数是从第一条读取事件;
  • 不带 --from-beginning 参数只能读取消费者启动后生产者发送的数据
bash 复制代码
./kafka-console-consumer.sh --topic helloword --from-beginning --bootstrap-server localhost:9092
相关推荐
阿里云云原生2 天前
数据链路再精简:Kafka 如何做到“零 ETL”一键写入 Apache Iceberg?
kafka
阿里云云原生8 天前
告别冗长链路!Kafka × Table Bucket 实现开放表格式零 ETL 实时入湖
云原生·kafka
风吹夏回14 天前
RabbitMQ 核心术语 + Python pika 方法完整讲解
分布式·python·rabbitmq
风吹夏回14 天前
RabbitMQ 三种模式入门:HelloWorld、WorkQueue、PubSub
分布式·rabbitmq·ruby
霸道流氓气质14 天前
分布式追踪与 RequestId 传播完全指南
分布式
cheems952714 天前
[RabbitMQ高级特性] 消息确认机制:从 Ready / Unacked 到 basicAck、basicReject、basicNack 的底层拆解
分布式·rabbitmq·ruby
whaledown14 天前
Kafka 与 Java 消息队列入门:用订单场景理解核心机制
java·kafka·消息队列·springboot
枫华落尽14 天前
【Hadoop01-完全分布式运行模式】
分布式
隔壁阿布都14 天前
ShedLock 分布式定时任务锁框架介绍
spring boot·分布式
文艺倾年14 天前
【强化学习】数学推导专题,20W字总结(十五)
人工智能·分布式·大模型·强化学习·vibecoding