(一)kafka实战——kafka源码编译启动

前言

本节内容是关于kafka消息中间键的源码编译,并通过idea工具实现kafka服务器的启动,使用的kafka源码版本是3.6.1,由于kafka源码是通过gradle编译的,以及服务器是通过scala语言实现,我们要预先安装好gradle编译工具和scala环境,同时需要安装scala依赖的java环境jdk17。

正文

①下载安装gradle编译工具

  • gradle下载地址:

https://github.com/gradle/gradle-distributions/releases/download/v8.7.0/gradle-8.7-all.zip

  • 解压gradle压缩包到指定目录
  • 配置gradle系统环境变量
  • 查看gradle安装版本信息

②下载安装scala工具安装包

  • 下载地址

Scala 2.13.11 | The Scala Programming Language

  • 解压到指定目录
  • 配置scala环境变量
  • 查看scala安装版本信息

③下载kafka源码包

  • 下载地址

Apache Kafka

  • 解压kafka源码包到指定位置

④ 使用gradle编译kafka源码包

  • 命令:gradle idea
  • 命令:gradle build --exclude-task test

⑤使用idea工具打开kafka源码程序,并配置依赖环境

  • 使用idea打开kafka源码
  • 配置java运行环境
  • 配置modules环境
  • 配置scala环境

⑥在idea插件中心安装scala插件,以支持kafka服务器源码的运行

⑦ 修改kafka服务器的配置

  • kafka数据存储位置
  • 配置zookeeper连接,并启动zookeeper

⑧idea工具本地启动kafka服务器

  • 配置kafka启动参数
  • 启动kafka服务器

⑨使用工具连接本地kafka服务器,验证kafka服务器是否已经启动成功,并且可以正常创建主题,发送消息

结语

至此,关于kafka源码编译启动的内容到这里就结束了,我们下期见。。。。。。

相关推荐
Thomas.Sir4 天前
第21课:PyTorch|GPU多卡训练与分布式训练基础【让多卡并行成为你的加速引擎】
人工智能·pytorch·分布式
Cicada1284 天前
库存消息消费的正确性设计——从幂等窗口到批量流水线
分布式·系统架构
Nano叶落4 天前
Kafka 消费积压排查入门:Docker 搭环境亲手制造一次 ‘消息堵死‘,10 分钟看懂 Lag
kafka
Francek Chen5 天前
【大数据处理与分析】数据仓库Hive:04 数据仓库Hive概述
大数据·数据仓库·hive·hadoop·分布式
Gl�ria5 天前
Hadoop/YARN 集群缩容:下线DN节点
大数据·hadoop·分布式
吉甫作诵5 天前
Kafka 集群安装与运维实战:消费组排查、Offset 重置与副本重分配
大数据·运维·分布式·kafka·消息队列
imDwAaY5 天前
消息队列四大核心问题:顺序性、幂等性、可靠性与一致性
学习·kafka·rabbitmq
wno7045 天前
Spring Boot整合Kafka
spring boot·kafka
是Dream呀6 天前
Harness 工程:让 Agent 真正把任务做完
人工智能·分布式·缓存·agent