kafka学习笔记01(小滴课堂)

介绍分布式流处理平台kafka快速认知

介绍分布式流处理平台kafka核心概念解释

急速部署-Kafka相关环境准备和安装

Linux环境下Zookeeper和Kafka安装启动

解压两个软件的压缩包:

tar -zxvf

启动zk:

去log目录进行查看:

查看一下2181端口是否被占用:

安装卡夫卡,kafka默认端口是9092.

编辑配置文件:

集群下broker.id不能相同。

配置这个地址。

这两个配置的Ip不能相同。

如果zk和kfk是同台机器,则不需要修改。

启动kfk:

运行报错。

修改kafka的内存需要的大小:

改小一些即可:

再重新启动:

我们可以发现该端口下已经存在线程了。

停止kafka:

复制代码
kafka-server-stop.sh

创建topic:

复制代码
./kafka-topics.sh --create --zookeeper 112.74.55.160:2181 --replication-factor 1 --partitions 1 --topic xdclass-topic

查看我们创建的topic:

列举topic列表

再创建一个topic:

我们可以看到两个分区就有两个。而且,每个分区下也有其自己的内容。

Linux环境下daemon守护进程运行Kafka

我们如果重新登陆服务器,就看不到我们的kafka服务了。

我们现在可以使用守护线程的方法。

复制代码
./kafka-server-start.sh -daemon ../config/server.properties &
相关推荐
xiaotao1316 小时前
02-机器学习基础: 监督学习——线性回归
学习·机器学习·线性回归
墨黎芜6 小时前
ArcGIS从入门到精通——地图符号、注记的初步使用
学习·arcgis·信息可视化
小李云雾7 小时前
FastAPI重要知识点---中间件(Middleware)
学习·程序人生·中间件·fastapi·middleware
.Cnn7 小时前
JavaScript 前端基础笔记(网页交互核心)
前端·javascript·笔记·交互
小夏子_riotous7 小时前
Docker学习路径——3、常用命令
linux·运维·服务器·学习·docker·容器·centos
STLearner7 小时前
WSDM 2026 | 时间序列(Time Series)论文总结【预测,表示学习,因果】
大数据·论文阅读·人工智能·深度学习·学习·机器学习·数据挖掘
redaijufeng7 小时前
网络爬虫学习:应用selenium获取Edge浏览器版本号,自动下载对应版本msedgedriver,确保Edge浏览器顺利打开。
爬虫·学习·selenium
九成宫8 小时前
IT项目管理期末复习——Chapter 10 项目沟通管理
笔记·项目管理·软件工程
腾科IT教育8 小时前
零基础快速上岸HCIP,高效学习思路分享
学习·华为认证·hcip·hcip考试·hcip认证
23471021278 小时前
4.14 学习笔记
笔记·python·学习