SpringCloud集成kafka集群

目录

1.引入kafka依赖

2.在yml文件配置配置kafka连接

3.注入KafkaTemplate模版

4.创建kafka消息监听和消费端

5.搭建kafka集群

[5.1 下载 kafka Apache KafkaApache Kafka: A Distributed Streaming Platform.https://kafka.apache.org/downloads.html](#5.1 下载 kafka Apache KafkaApache Kafka: A Distributed Streaming Platform.https://kafka.apache.org/downloads.html)

[5.2 在config目录下做相关配置](#5.2 在config目录下做相关配置)


1.引入kafka依赖

java 复制代码
 <!-- Spring Boot Kafka Starter -->
        <dependency>
            <groupId>org.springframework.kafka</groupId>
            <artifactId>spring-kafka</artifactId>
        </dependency>

2.在yml文件配置配置kafka连接

java 复制代码
  kafka:
    bootstrap-servers: localhost:9092,localhost:9093,localhost:9095,localhost:9096
    consumer:
      group-id: myGroup
      auto-offset-reset: earliest
      key-deserializer: org.apache.kafka.common.serialization.StringDeserializer
      value-deserializer: org.apache.kafka.common.serialization.StringDeserializer
    producer:
      key-serializer: org.apache.kafka.common.serialization.StringSerializer
      value-serializer: org.apache.kafka.common.serialization.StringSerializer

3.注入KafkaTemplate模版

java 复制代码
@Configuration
public class KafkaConfig {
    @Autowired
    private ProducerFactory producerFactory;
    @Bean
    public KafkaTemplate<String, String> kafkaTemplate() {
        return new KafkaTemplate<>(producerFactory);
    }
   /* @Bean
    public ProducerFactory<String, String> producerFactory() {
        Map<String, Object> configProps = new HashMap<>();
        configProps.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG, "localhost:9092");
        configProps.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG, StringSerializer.class);
        configProps.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG, StringSerializer.class);
        // 添加其他配置...
        return new DefaultKafkaProducerFactory<>(configProps);
    }*/
}

4.创建kafka消息监听和消费端

java 复制代码
package com.example.consumer.consumer;

import org.springframework.kafka.annotation.KafkaListener;
import org.springframework.stereotype.Component;

@Component
public class KafkaConsumer {
    @KafkaListener(topics = "yourTopic", groupId = "myGroup")
    public void listen(String message) {
        System.out.println("Received Message in group 'myGroup': " + message);
    }
}

5.搭建kafka集群

5.1 下载 kafkaApache KafkaApache Kafka: A Distributed Streaming Platform.https://kafka.apache.org/downloads.html

5.2 在config目录下做相关配置

zookeeper.properties相关配置

server.properties相关配置 ,端口默认是9092,如果需要配置特定端口,可以加port=9092

想搞几个集群就复制几个,并且修改zookeeper.propertie和server.properties的端口。

就像我配置的

相关推荐
yogima12 分钟前
kafka Tool (Offset Explorer)使用SASL Plaintext进行身份验证
kafka
北i4 小时前
IOT集群扩容实践:问题剖析与解决策略
后端·物联网·kafka
谷新龙0014 小时前
docker compose部署kafka
docker·容器·kafka
.生产的驴4 小时前
SpringBoot 服务器监控 监控系统开销 获取服务器系统的信息用户信息 运行信息 保持稳定
服务器·spring boot·分布式·后端·spring·spring cloud·信息可视化
hqxstudying7 小时前
Kafka
java·spring cloud·kafka
康小庄9 小时前
AQS独占模式——资源获取和释放源码分析
java·开发语言·jvm·spring boot·spring·spring cloud·nio
码不停蹄的玄黓9 小时前
通关JUC:Java并发工具包从入门到精通 | 深度源码解析
java·jvm·spring boot·spring·spring cloud
异常君10 小时前
Dubbo 与 Spring Cloud Gateway 技术对比:微服务架构中的协同实践
spring cloud·微服务·dubbo
一眼万年0410 小时前
Kafka KRaft 深度解析
微服务·kafka
一眼万年0411 小时前
Kafka LogManager 深度解析
后端·kafka