kafka学习笔记01(小滴课堂)

介绍分布式流处理平台kafka快速认知

介绍分布式流处理平台kafka核心概念解释

急速部署-Kafka相关环境准备和安装

Linux环境下Zookeeper和Kafka安装启动

解压两个软件的压缩包:

tar -zxvf

启动zk:

去log目录进行查看:

查看一下2181端口是否被占用:

安装卡夫卡,kafka默认端口是9092.

编辑配置文件:

集群下broker.id不能相同。

配置这个地址。

这两个配置的Ip不能相同。

如果zk和kfk是同台机器,则不需要修改。

启动kfk:

运行报错。

修改kafka的内存需要的大小:

改小一些即可:

再重新启动:

我们可以发现该端口下已经存在线程了。

停止kafka:

复制代码
kafka-server-stop.sh

创建topic:

复制代码
./kafka-topics.sh --create --zookeeper 112.74.55.160:2181 --replication-factor 1 --partitions 1 --topic xdclass-topic

查看我们创建的topic:

列举topic列表

再创建一个topic:

我们可以看到两个分区就有两个。而且,每个分区下也有其自己的内容。

Linux环境下daemon守护进程运行Kafka

我们如果重新登陆服务器,就看不到我们的kafka服务了。

我们现在可以使用守护线程的方法。

复制代码
./kafka-server-start.sh -daemon ../config/server.properties &
相关推荐
心中有国也有家1 分钟前
CANN 算子开发完全指南——从 TBE DSL 到算子上线全流程
人工智能·经验分享·笔记·分布式·算法
Sahadev_11 分钟前
GitMemo 安卓版发布了:现在可以随时随地查看和记录自己的笔记
android·笔记·创业创新
会编程的土豆13 分钟前
消息队列(MQ)入门笔记
java·笔记·spring
水木流年追梦13 分钟前
大模型入门-DPO 直接偏好优化
人工智能·学习·算法·机器学习·正则表达式
网络与设备以及操作系统学习使用者16 分钟前
vi与vim在openEuler中的差异及应用
linux·运维·网络·学习·vim
atomicmaker18 分钟前
进程/线程?并发/并行?
经验分享·笔记·其他
徐安安_ye125 分钟前
FlashAttention学习路线:从调API到写算子,你该走哪条路
python·学习
水云桐程序员26 分钟前
学习 React Native(简称 RN)的路径
学习·react native·react.js
lizhihai_9927 分钟前
股市学习心得-技术指标学习(布林线+MACD)
大数据·人工智能·学习
wuxinyan1231 小时前
工业级大模型学习之路024:LangChain零基础入门教程(第七篇):RAG 系统评估、全链路调优
人工智能·python·学习·langchain