kafka学习笔记01(小滴课堂)

介绍分布式流处理平台kafka快速认知

介绍分布式流处理平台kafka核心概念解释

急速部署-Kafka相关环境准备和安装

Linux环境下Zookeeper和Kafka安装启动

解压两个软件的压缩包:

tar -zxvf

启动zk:

去log目录进行查看:

查看一下2181端口是否被占用:

安装卡夫卡,kafka默认端口是9092.

编辑配置文件:

集群下broker.id不能相同。

配置这个地址。

这两个配置的Ip不能相同。

如果zk和kfk是同台机器,则不需要修改。

启动kfk:

运行报错。

修改kafka的内存需要的大小:

改小一些即可:

再重新启动:

我们可以发现该端口下已经存在线程了。

停止kafka:

复制代码
kafka-server-stop.sh

创建topic:

复制代码
./kafka-topics.sh --create --zookeeper 112.74.55.160:2181 --replication-factor 1 --partitions 1 --topic xdclass-topic

查看我们创建的topic:

列举topic列表

再创建一个topic:

我们可以看到两个分区就有两个。而且,每个分区下也有其自己的内容。

Linux环境下daemon守护进程运行Kafka

我们如果重新登陆服务器,就看不到我们的kafka服务了。

我们现在可以使用守护线程的方法。

复制代码
./kafka-server-start.sh -daemon ../config/server.properties &
相关推荐
桂花很香,旭很美26 分钟前
Anthropic Agent 工程实战笔记(二)工具设计
笔记·架构·language model
我命由我123451 小时前
Photoshop - Ps还原和历史记录
学习·ui·职场和发展·求职招聘·职场发展·学习方法·photoshop
我命由我123451 小时前
Photoshop - Ps工作界面
学习·ui·职场和发展·求职招聘·职场发展·学习方法·photoshop
梅羽落1 小时前
XPath笔记
笔记
桂花很香,旭很美2 小时前
Anthropic Agent 工程实战笔记(六)安全与生产
笔记·架构·agent
ps酷教程2 小时前
spring-retry学习 (2) -图解源码
学习
2501_943695332 小时前
大专市场调查与统计分析专业,怎么学习市场调研问卷的设计?
人工智能·学习
sponge'2 小时前
opencv学习笔记14:transformer
笔记·学习·transformer
xhyu613 小时前
【学习笔记】推荐系统 (4.召回:Deep Retrieval、其他召回通道、曝光过滤)
笔记·学习