mac 本地 docker 安装 kafka

方案一:传统模式(需Zookeeper)

‌ 1. 拉取镜像‌

bash 复制代码
docker pull wurstmeister/zookeeper  # Zookeeper镜像‌:ml-citation{ref="3" data="citationList"}
docker pull wurstmeister/kafka      # Kafka镜像‌:ml-citation{ref="3" data="citationList"}
  1. 启动 zookeeper
bash 复制代码
docker run -d --name zookeeper \
-p 2181:2181 \
-v /etc/localtime:/etc/localtime \
wurstmeister/zookeeper
  1. 启动 kafka
bash 复制代码
docker run -d --name kafka \
-p 9092:9092 \
-e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://localhost:9092 \
-e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 \
-e KAFKA_ZOOKEEPER_CONNECT=zookeeper:2181 \
--link zookeeper \
wurstmeister/kafka

4.创建队列

注意 容器里面 kafka 的启动脚本的路径可能存在差异。需要具体找到此路径

bash 复制代码
/opt/kafka_2.13-2.8.1/bin/kafka-topics.sh
bash 复制代码
docker exec -it kafka bash
/opt/kafka_2.13-2.8.1/bin/kafka-topics.sh --create \
--bootstrap-server localhost:9092 \
--replication-factor 1 \
--partitions 1 \
--topic test-topic

5.查看队列

bash 复制代码
/opt/kafka_2.13-2.8.1/bin/kafka-topics.sh --list \
--bootstrap-server localhost:9092

快速Java 代码验证是否创建成功和链接成功

maven

java 复制代码
<dependency>
    <groupId>org.apache.kafka</groupId>
    <artifactId>kafka-clients</artifactId>
    <version>3.5.1</version>
</dependency>

生产者

java 复制代码
import org.apache.kafka.clients.producer.*;

public class KafkaProducerDemo {
    public static void main(String[] args) {
        Properties props = new Properties();
        props.put("bootstrap.servers", "localhost:9092");
        props.put("key.serializer", "org.apache.kafka.common.serialization.StringSerializer");
        props.put("value.serializer", "org.apache.kafka.common.serialization.StringSerializer");

        Producer<String, String> producer = new KafkaProducer<>(props);
        ProducerRecord<String, String> record = new ProducerRecord<>("test-topic", "key", "Hello Kafka");
        producer.send(record);
        producer.close();
    }
}

消费者

java 复制代码
import org.apache.kafka.clients.consumer.*;

public class KafkaConsumerDemo {
    public static void main(String[] args) {
        Properties props = new Properties();
        props.put("bootstrap.servers", "localhost:9092");
        props.put("group.id", "test-group");
        props.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");
        props.put("value.deserializer", "org.apache.kafka.common.serialization.StringDeserializer");

        Consumer<String, String> consumer = new KafkaConsumer<>(props);
        consumer.subscribe(Collections.singletonList("test-topic"));
        while (true) {
            ConsumerRecords<String, String> records = consumer.poll(Duration.ofMillis(100));
            for (ConsumerRecord<String, String> record : records) {
                System.out.printf("Received: key=%s, value=%s%n", record.key(), record.value());
            }
        }
    }
}

继承到 springboot 敬请期待后续

相关推荐
Riu_Peter3 小时前
【技术】记一次 Docker 中的 ES 数据迁移,使用 Reindex API
elasticsearch·docker·容器
Edingbrugh.南空3 小时前
Kafka 3.0零拷贝技术全链路源码深度剖析:从发送端到日志存储的极致优化
分布式·kafka
lishaoan775 小时前
TensorFlow环境搭建之Docker Image
docker·tensorflow
Edingbrugh.南空6 小时前
Kafka分区机制深度解析:架构原理、负载均衡与性能优化
架构·kafka·负载均衡
计算机小手6 小时前
Docker 快速搭建一个基于 GPT-Vis 组件的统计图表生成服务
经验分享·docker·开源软件
谷新龙0016 小时前
神奇的bug之docker compose启动mysql失败
mysql·docker·bug
miaoikxm7 小时前
本地windows搭建kafka
windows·分布式·kafka
该用户已不存在7 小时前
8个Docker的最佳替代方案,重塑你的开发工作流
前端·后端·docker
Edingbrugh.南空8 小时前
Kafka数据写入流程源码深度剖析(Broker篇)
分布式·kafka
(:满天星:)9 小时前
ELK技术栈全面解析与部署方案
linux·运维·服务器·elk·docker·centos