SpringCloud集成kafka集群

目录

1.引入kafka依赖

2.在yml文件配置配置kafka连接

3.注入KafkaTemplate模版

4.创建kafka消息监听和消费端

5.搭建kafka集群

[5.1 下载 kafka Apache KafkaApache Kafka: A Distributed Streaming Platform.https://kafka.apache.org/downloads.html](#5.1 下载 kafka Apache KafkaApache Kafka: A Distributed Streaming Platform.https://kafka.apache.org/downloads.html)

[5.2 在config目录下做相关配置](#5.2 在config目录下做相关配置)


1.引入kafka依赖

java 复制代码
 <!-- Spring Boot Kafka Starter -->
        <dependency>
            <groupId>org.springframework.kafka</groupId>
            <artifactId>spring-kafka</artifactId>
        </dependency>

2.在yml文件配置配置kafka连接

java 复制代码
  kafka:
    bootstrap-servers: localhost:9092,localhost:9093,localhost:9095,localhost:9096
    consumer:
      group-id: myGroup
      auto-offset-reset: earliest
      key-deserializer: org.apache.kafka.common.serialization.StringDeserializer
      value-deserializer: org.apache.kafka.common.serialization.StringDeserializer
    producer:
      key-serializer: org.apache.kafka.common.serialization.StringSerializer
      value-serializer: org.apache.kafka.common.serialization.StringSerializer

3.注入KafkaTemplate模版

java 复制代码
@Configuration
public class KafkaConfig {
    @Autowired
    private ProducerFactory producerFactory;
    @Bean
    public KafkaTemplate<String, String> kafkaTemplate() {
        return new KafkaTemplate<>(producerFactory);
    }
   /* @Bean
    public ProducerFactory<String, String> producerFactory() {
        Map<String, Object> configProps = new HashMap<>();
        configProps.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG, "localhost:9092");
        configProps.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG, StringSerializer.class);
        configProps.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG, StringSerializer.class);
        // 添加其他配置...
        return new DefaultKafkaProducerFactory<>(configProps);
    }*/
}

4.创建kafka消息监听和消费端

java 复制代码
package com.example.consumer.consumer;

import org.springframework.kafka.annotation.KafkaListener;
import org.springframework.stereotype.Component;

@Component
public class KafkaConsumer {
    @KafkaListener(topics = "yourTopic", groupId = "myGroup")
    public void listen(String message) {
        System.out.println("Received Message in group 'myGroup': " + message);
    }
}

5.搭建kafka集群

5.1 下载 kafkaApache KafkaApache Kafka: A Distributed Streaming Platform.https://kafka.apache.org/downloads.html

5.2 在config目录下做相关配置

zookeeper.properties相关配置

server.properties相关配置 ,端口默认是9092,如果需要配置特定端口,可以加port=9092

想搞几个集群就复制几个,并且修改zookeeper.propertie和server.properties的端口。

就像我配置的

相关推荐
jiayong2343 分钟前
Kafka 高吞吐消息链路常见面试问题及详细解答
分布式·面试·kafka
段一凡-华北理工大学2 小时前
工业领域的Hadoop架构学习~系列文章05:Kafka消息队列 - 工业数据流传输
人工智能·hadoop·学习·架构·kafka·工业智能体·高炉炼铁智能化
JAVA社区13 小时前
Java高级全套教程(十)—— SpringCloudAlibaba超详细实战详解
java·开发语言·spring cloud·面试·职场和发展
西安邮电大学1 天前
Kafka保证消息顺序性
java·后端·kafka
JAVA社区1 天前
Java高级全套教程(九)—— SpringCloud超详细实战详解
java·开发语言·后端·spring cloud·面试·职场和发展
Devin~Y1 天前
大厂Java面试实录:Spring Boot/Cloud、Kafka、Redis、K8s 可观测性 + RAG/Agent(小Y翻车版)
java·spring boot·redis·spring cloud·kafka·kubernetes·mybatis
菜萝卜子1 天前
【Docker】Harbor 代理缓存(Pull-Through Cache)配置与使用指南
spring cloud·云原生·eureka
苏渡苇1 天前
Spring Cloud Gateway 网关限流
spring cloud·gateway·springboot·网关限流
dj80451 天前
docker 安装注意事项与使用
spring cloud·docker·eureka
西安邮电大学1 天前
Kafka如何避免重复消费
java·后端·其他·面试·kafka