探秘Kafka源码:关键内容解析

文章目录

一、以kafka-3.0.0为例

打开 IDEA,点击 File->Open...->源码包解压的位置。

1.1安装 gradle

Gradle是类似于 maven 的代码管理工具。Kafka基于它编译。

IDEA 自动帮你下载安装,下载的时间比较长(网络慢,需要 1 天时间,有 VPN 需要几分钟)。

二、生产者源码

2.1源码主流程图

2.2 初始化

2.3生产者sender线程初始化

2.4 程序入口

复制代码
import org.apache.kafka.clients.producer.KafkaProducer;
import org.apache.kafka.clients.producer.ProducerConfig;
import org.apache.kafka.clients.producer.ProducerRecord;
import org.apache.kafka.common.serialization.StringSerializer;
import java.util.Properties;
public class CustomProducer {
	public static void main(String[] args) {
	// 0 配置
	Properties properties = new Properties();
	// 连接集群 bootstrap.servers
	properties.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG,"hadoop102
	:9092,hadoop103:9092");
	// 指定对应的 key 和 value 的序列化类型 key.serializer
	properties.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG,
	StringSerializer.class.getName());
	properties.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG,Strin
	gSerializer.class.getName());
	// 1 创建 kafka 生产者对象
	// "" hello
	KafkaProducer<String,  String>  kafkaProducer  =  new
	KafkaProducer<>(properties);
	// 2 发送数据
	for (int i = 0; i < 5; i++) {
	kafkaProducer.send(new
	ProducerRecord<>("first","atguigu"+i));
	}
	// 3 关闭资源
	kafkaProducer.close();
	}
}

2.5生产者 main 线程初始化

点击 main()方法中的 KafkaProducer()。

2.6 跳转到 KafkaProducer构造方法

相关推荐
ShAn DiAn1 小时前
实时步数统计系统 kafka + spark +redis
大数据·redis·分布式·spark·kafka
苏小夕夕2 小时前
kafka安装、spark安装
大数据·spark·kafka
知初~2 小时前
java—12 kafka
分布式·中间件·kafka
小马爱打代码3 小时前
Kafka 命令行样例大全
kafka
xmyLydia3 小时前
Kafka + Elasticsearch 构建搜索型审计日志系统实战(含 Kibana 可视化)
elasticsearch·kafka
sinat_262292117 小时前
Java面试实战:音视频场景下的微服务架构与缓存技术剖析
java·spring boot·redis·微服务·kafka·分布式系统·面试技巧
慧一居士13 小时前
Kafka 消息积压监控和报警配置的详细步骤
kafka·运维开发
晴天彩虹雨16 小时前
实时数仓体系概览与架构演进
数据仓库·clickhouse·架构·flink·kafka
星辰瑞云20 小时前
spark—kafka
spark·kafka