Kafka操作

目录

一、创建主题

二、查看主题

三、修改分区数

四、删除主题

五、生产数据

六、创建消费组


一、创建主题

--- kafka-topics.sh

---bootstrap-server 指定连接的kafka服务

  • --create 创建主题

  • --partitions 指定分区数 默认一个

  • --replication-factor 指定分区中的副本数量 默认一个

  • --topic 指定主题名称

kafka-topics.sh --bootstrap-server node1:9092 --create --partitions 3 --replication-factor 3 --topic test1

二、查看主题

  • --kafka-topics.sh

  • --bootstrap-server 指定连接的kafka服务

  • --list 查看所有主题

  • --describe 查看详情信息

  • --describe --topic itcast 查看某个主题详情信息

查看有哪些主题

kafka-topics.sh --bootstrap-server node1:9092 --list

查看所有主题详情信息

kafka-topics.sh --bootstrap-server node1:9092 --describe

查看某个具体主题详请

kafka-topics.sh --bootstrap-server node1:9092 --describe --topic test1

三、修改分区数

-- - kafka-topics.sh

  • --bootstrap-server 指定连接的kafka服务

  • --alter 修改主题
    kafka-topics.sh --bootstrap-server node1:9092 --alter --partitions 3 --topic test01

四、删除主题

  • --kafka-topics.sh

  • --bootstrap-server 指定连接的kafka服务

  • --delete 删除主题
    kafka-topics.sh --bootstrap-server node1:9092 --delete --topic test01

五、生产数据

--kafka-console-producer.sh --brooker-list node1 --topic test

六、创建消费组

数据源,创建消费者组消费指定topic,并从指定 offset 开始消费数据

相关推荐
飞奔的瓜牛20 分钟前
Kafka 生产实践指南:使用要点、性能优化与运维维护
中间件·性能优化·kafka
时间的拾荒人2 小时前
Redis 典型应用:缓存与分布式锁原理
redis·分布式·缓存·面试·架构
筑梦之人1 天前
Elasticsearch 9.x 从入门到精通(5/7):集群、分布式与运维
运维·分布式·elasticsearch
kiwixing2 天前
GaussDB|集中式还是分布式?三把尺子选型
分布式·gaussdb
真上帝的左手3 天前
30. 技术专题-‌应用框架组件-分布式架构
分布式·架构·系统架构·分布式架构
zixu_star3 天前
从单机到分布式:定时任务如何处理大量数据与执行失败?
分布式
lsc_blog4 天前
听到优化风声,先准备能由自己掌控的事
数据库·分布式·中间件·职场和发展·重构
Lansonli5 天前
大数据Spark(八十七):Spark-Submit 参数详解
大数据·分布式·spark
qq_452396235 天前
第二篇:《CommitLog + ConsumeQueue:一条日志解决 Kafka 多分区随机写的难题》
分布式·kafka
Alluxio6 天前
Alluxio + OCI:为 AI 工作负载实现亚毫秒访问延迟与可扩展吞吐
运维·数据库·人工智能·分布式·缓存·ai·语言模型