Kafka主题(Topic/文件夹)的操作

Kafka主题(Topic/文件夹)的操作

1、Kafka主题(Topic/文件夹)

注意:下方涉及topic的所有操作都是在kafka安装目录的bin文件夹下执行

bash 复制代码
/usr/local/kafka_2.13-3.7.0/bin

2、Kafka主题(Topic/文件夹)的一些操作

2.1、创建主题(Topic/文件夹)

bash 复制代码
./kafka-topics.sh --create --topic helloword --bootstrap-server localhost:9092

2.2、列出所有主题(Topic/文件夹)

bash 复制代码
./kafka-topics.sh --list  --bootstrap-server localhost:9092

2.3、删除主题(Topic/文件夹)

bash 复制代码
./kafka-topics.sh --list  --bootstrap-server localhost:9092

2.4、显示主题(Topic/文件夹)详细信息

bash 复制代码
./kafka-topics.sh --describe --topic helloword --bootstrap-server localhost:9092

2.5、修改主题(Topic/文件夹)分区数

bash 复制代码
./kafka-topics.sh --alter --topic helloword --partitions 5 --bootstrap-server localhost:9092

修改后的分区数是5

3、生产者:在Kafka主题(Topic/文件夹)中写事件的操作(./kafka-console-producer.sh)

3.1、查看如何使用写入事件的脚本

执行./kafka-console-producer.sh脚本可以查看如何往topic里边写入事件

bash 复制代码
./kafka-console-producer.sh

3.2、往主题中写入事件

执行如下命令可以往指定主题中写入事件:

  • 每次换行写入一个新的主题
  • 按ctrl+c结束
bash 复制代码
./kafka-console-producer.sh --topic helloword --bootstrap-server localhost:9092

4、消费者:从Kafka主题(Topic/文件夹)中读事件的操作(./kafka-console-consumer.sh)

4.1、不带任何参数执行脚本会告诉如何使用

bash 复制代码
./kafka-console-consumer.sh

4.2、从kafka指定topic中读取事件

注意:

  • 带上 --from-beginning 参数是从第一条读取事件;
  • 不带 --from-beginning 参数只能读取消费者启动后生产者发送的数据
bash 复制代码
./kafka-console-consumer.sh --topic helloword --from-beginning --bootstrap-server localhost:9092
相关推荐
陈辛chenxin9 小时前
【大数据技术06】大数据技术
大数据·hadoop·分布式·python·信息可视化
yumgpkpm9 小时前
Hadoop在AI时代如何实现生态协同? CMP 7.13(或类 Cloudera CDP7.3 的 CMP 7.13 平台,如华为鲲鹏 ARM 版)
大数据·hadoop·elasticsearch·zookeeper·kafka·hbase·cloudera
执笔论英雄9 小时前
【大模型训练】megatron分布式并行训练的调用流程,关键函数forward_backward_func
分布式
kaikaile199510 小时前
34节点配电网牛顿-拉夫逊潮流计算 + 分布式电源(DG)多场景分析的 MATLAB
开发语言·分布式·matlab
老虎062710 小时前
黑马点评学习笔记10(优惠券秒杀下单优化(分布式锁的优化,Lua脚本))
笔记·分布式·学习
小坏讲微服务10 小时前
使用 Spring Cloud Gateway 实现集群
java·spring boot·分布式·后端·spring cloud·中间件·gateway
失散1311 小时前
分布式专题——53 ElasticSearch高可用集群架构实战
java·分布式·elasticsearch·架构
居7然12 小时前
详解监督微调(SFT):大模型指令遵循能力的核心构建方案
人工智能·分布式·架构·大模型·transformer
梦里不知身是客1117 小时前
kafka独立消费者案例(订阅主题)
分布式·kafka·linq
不见长安在21 小时前
分布式的cap,base,raft
分布式·raft·cap·base