Windows+docker下简单kafka测试联调

环境:

bash 复制代码
1. Windows desktop
2. OpenJDK 17
3. Idea community
4. offset explorer(kafka GUI tool, optional)

一. 简单环境安装

1.安装完Windows desktop后,控制台拉取官方镜像(写时最新为4.1.1)

bash 复制代码
docker pull apache/kafka:4.1.1

拉取成功后通过docker images命令或者docker desktop Images中看到此镜像

2.运行实例,将端口映射到本机9092上:

bash 复制代码
docker run -d --name kafka -p 9092:9092 apche/kafka:4.1.1

使用docker ps或者在docker desktop的containers中查看刚才的实例

3.进入到实例里面, 用docker exec命令或者docker destop直接查看:

bash 复制代码
docker exec -it kafka bash
# or
docker exec -it [your kafka instance id] bash

kafka在/opt/kafka目录下,查看目录结构:

查看版本验证:

bash 复制代码
bin/kafka-topics.sh --version

查看本地已有主题

bash 复制代码
bin/kafka-topics.sh --bootstrap-server localhost:9092 --list

手动创建topic

bash 复制代码
bin/kafka-topics.sh --bootstrap-server localhost:9092 --create --topic your-topic-name

删除topic

bash 复制代码
bin/kafka-topics.sh --bootstrap-server localhost:9092 --delete --topic your-topic-name

二.使用Spring Boot/Java程序简单测试Kafka

1.去spring initializer网站上初始化一个Spring Boot项目,添加web+kafka依赖

2.用idea打开并添加如下代码:

application.yarml:

bash 复制代码
spring:
  kafka:
    bootstrap-servers: localhost:9092
    consumer:
      group-id: my-group
      auto-offset-reset: earliest
      key-deserializer: org.apache.kafka.common.serialization.StringDeserializer
      value-deserializer: org.apache.kafka.common.serialization.StringDeserializer
    producer:
      key-serializer: org.apache.kafka.common.serialization.StringSerializer
      value-serializer: org.apache.kafka.common.serialization.StringSerializer

server:
  port: 8080
复制代码
KafkaController.java:
java 复制代码
package com.example.demo.controller;


import com.example.demo.service.KafkaProducer;
import org.springframework.web.bind.annotation.*;

@RestController
@RequestMapping("/kafka")
public class KafkaController {

    private final KafkaProducer kafkaProducer;

    public KafkaController(KafkaProducer kafkaProducer) {
        this.kafkaProducer = kafkaProducer;
    }

    @PostMapping("/send")
    public String sendMessage(@RequestParam String msg,
                              @RequestParam(defaultValue = "test-topic") String topic) {
        kafkaProducer.sendMessage(topic, msg);
        return "Message sent to topic '" + topic + "': " + msg;
    }
}
复制代码
KafkaConsumer.java:
java 复制代码
package com.example.demo.service;

import org.apache.kafka.clients.consumer.ConsumerRecord;
import org.springframework.kafka.annotation.KafkaListener;
import org.springframework.stereotype.Service;

@Service
public class KafkaConsumer {

    @KafkaListener(topics = "test-topic", groupId = "my-group")
    public void listen(ConsumerRecord<String, String> record) {
        System.out.printf("Received message: topic=%s, partition=%d, offset=%d, value=%s%n",
                record.topic(), record.partition(), record.offset(), record.value());
    }
}
复制代码
KafkaProducer.java:
java 复制代码
package com.example.demo.service;

import org.springframework.kafka.core.KafkaTemplate;
import org.springframework.stereotype.Service;

@Service
public class KafkaProducer {

    private final KafkaTemplate<String, String> kafkaTemplate;

    public KafkaProducer(KafkaTemplate<String, String> kafkaTemplate) {
        this.kafkaTemplate = kafkaTemplate;
    }

    public void sendMessage(String topic, String message) {
        kafkaTemplate.send(topic, message);
        System.out.println("Sent message: " + message + " to topic: " + topic);
    }
}

运行DemoApplication的main方法,启动spring boot,控制台最后打印:

相关推荐
Resean02231 天前
Spring 源码分析(二)配置类的解析与扫描
java·后端·spring
小毛球.1 天前
第 3 篇:IDEA 最新版下载与完整安装教程(Mac)
java·macos·intellij-idea·idea
Misnearch1 天前
ScheduledExecutorService
java·线程池
tianyuanwo1 天前
PostgreSQL 部署运维实战总结:从安装踩坑到生产可用
运维·数据库·postgresql
ashiho1 天前
【LeetCode hot 100】3. 无重复字符的最长子串 (三种解法)
java·数据结构·后端·算法·leetcode·滑动窗口
Decay__1 天前
SQLServer 优化案例集 —— 慢 SQL 优化、索引重构与参数调整收益对比
运维·数据库·sql·mysql·架构
T_Wizard1 天前
AI 回复为什么要转圈 3 秒才「啪」一下全出来?把流式输出拆开看,顺便踩了 6 个坑
java·ai编程
CoderYanger1 天前
Java EE 进阶:9.MyBatis 操作数据库(进阶)(第二弹)
java·数据库·面试·职场和发展·java-ee·tomcat·mybatis
优化Henry1 天前
LTE 站点 S1 链路反复闪断导致小区频闪退服故障排查
运维·网络·学习·信息与通信·tdd
manageengine1 天前
服务器 CPU 100% 怎么排查:8 条命令从现象定位到根因
运维·服务器·cpu