kafka

小钻风33663 小时前
分布式·zookeeper·kafka
ZooKeeper + Kafka 集群搭建实战记录环境:Rocky Linux 9.4 / ZooKeeper 3.8.6 / Kafka 2.13-3.9.2 目标:单机伪集群(3个ZK节点 + 3个Kafka Broker),用于学习分布式消息队列原理
小江的记录本6 小时前
java·数据库·分布式·后端·zookeeper·kafka·rabbitmq
【Kafka核心】Kafka 3.0+ KRaft模式(替代ZooKeeper)核心原理与优势本文全方位、结构化拆解Kafka 3.0+ KRaft模式的完整知识体系,覆盖背景演进、核心架构、底层原理、全链路流程、核心优势、版本特性、部署运维、最佳实践、避坑指南九大核心维度,完整呈现KRaft替代ZooKeeper的技术内核与生产落地体系。
bing_1586 小时前
分布式·zookeeper·kafka
Zookeeper 在 Kafka 中扮演了什么角色?在 Apache Kafka 的早期架构中,ZooKeeper 扮演了分布式协调服务角色,负责管理和协调整个 Kafka 集群。 尽管新版本的 Kafka 正在逐步移除对 ZooKeeper 的依赖,但在许多现有和较早的系统中,了解 ZooKeeper 的作用仍然非常重要。
醉颜凉6 小时前
zookeeper·kafka·linq
Kafka为什么抛弃ZooKeeper?深度解析KRaft时代的技术变革摘要:在长达十余年的时间里,ZooKeeper一直是Apache Kafka架构中不可或缺的组成部分,负责集群的元数据管理和协调工作。然而,随着Kafka 4.0的正式发布,ZooKeeper被彻底移除,取而代之的是内置的KRaft(Kafka Raft)共识机制。这一变革被誉为Kafka历史上最重大的架构调整。本文将深入剖析Kafka抛弃ZooKeeper的根本原因、KRaft的实现原理以及这一转变带来的深远影响。
会编程的土豆11 小时前
分布式·kafka
Kafka 操作流程(零基础完整流程)今天:我们不讲复杂理论。直接:从:完整走一遍。你学完:至少会:Kafka 最核心流程:例如:因为:现在:
岳麓丹枫00111 小时前
postgresql·flink·kafka
PostgreSQL 15.7 CDC → Flink → Kafka 操作笔记实验环境:openEuler 22.03 (LTS-SP4) x86_64在 SQL Client 中逐条执行以下 SQL:
会编程的土豆12 小时前
分布式·kafka
Kafka 零基础入门(最基本用法)很多人第一次学 Kafka:一上来:就看到:直接懵。其实:Kafka 最开始:你只需要理解:就够了。别一开始:
会编程的土豆12 小时前
笔记·分布式·kafka
Kafka 入门笔记(核心语法 + 用法)很多人第一次学 Kafka:都会被这些名词吓到:感觉:特别复杂。其实:Kafka 核心思想:还是:只是:
CAE虚拟与现实1 天前
数据库·redis·postgresql·kafka
重置系统后,Postgresql不用重装系统重置后原来的程序目录还在,但是有的用不了了,尤其是原来作为系统服务的程序,我原来安装过postgresql,数据data也都在,但是从系统服务里面看不到了,直接运行启动不了,然后就按照下面的办法重新注册了一下服务就好了。
努力发光的程序员1 天前
java·spring boot·spring cloud·微服务·kafka·hibernate·面试技巧
互联网大厂Java面试故事:Spring Boot与微服务全栈技术实战问答本文通过真实模拟场景,展现互联网大厂Java求职者面试过程,深入涵盖Java核心语言、Spring生态、微服务架构、数据库ORM、消息队列、缓存等全栈技术。
jameslogo1 天前
分布式·kafka·rocketmq
RocketMQ与Kafka零拷贝机制零拷贝是一种减少数据在用户空间和内核空间之间拷贝次数的技术,从而提高数据传输效率。在传统的数据传输过程中,数据在用户空间和内核空间之间通常需要进行多次复制,而零拷贝技术则尽可能地减少或避免这些复制操作。
Devin~Y2 天前
java·spring boot·redis·spring cloud·kafka·rabbitmq·spring mvc
大厂Java面试实录:Spring Boot微服务 + Redis缓存 + Kafka消息队列 + Prometheus链路追踪 + RAG向量检索某互联网大厂(电商+内容社区一体化)Java后端岗面试。业务背景:电商首页 /feed 推荐接口用 Spring Boot + Spring MVC 做,你会怎么设计 Controller 到 Service 的分层?DTO/VO 怎么放?
阿坤带你走近大数据2 天前
分布式·kafka
Kafka的基本概念,基本用法及常见使用场景Apache Kafka 是一个开源的分布式事件流平台(Event Streaming Platform),最初由 LinkedIn 开发,2011 年开源并成为 Apache 顶级项目。它专为高吞吐、低延迟、可持久化、可扩展的实时数据处理而设计,已成为现代数据架构的核心组件。
Lyyaoo.2 天前
分布式·kafka
Kafka快速入门Kafka 作为 Apache 基金会的顶级项目,由 LinkedIn 于 2011 年开源,已从最初的消息队列演化为一个成熟的分布式事件流平台——既能做消息缓冲,也能做日志采集、实时数据管道和流处理。
喝醉酒的小白3 天前
分布式·kafka
Kafka 集群应急故障排查手册⚠️ 重要提示: 本手册包含的高危操作可能导致数据丢失或服务中断。请在执行前仔细阅读风险说明,并确保已完成备份。
无籽西瓜a3 天前
java·分布式·后端·kafka·消息队列·mq
【西瓜带你学Kafka | 第八期】 Kafka的主从同步、消息可靠性、流处理与顺序消费(文含图解)用 Kafka 做基础消息收发并不难,但真正上生产之后,一连串棘手的问题就来了:消息怎么就丢了?消费者明明活着却不干活?多个业务共用一个集群怎么互不影响?消息顺序怎么就乱了?
qqVHU3 天前
笔记·分布式·kafka
kafka笔记一、部署示例docker-compose.yml1、创建topic,并开始发送消息2、消费者接收消息二、概念和原理
醉颜凉3 天前
分布式·kafka·linq
Kafka 消息过期时间设置与清理机制全解析在消息中间件的实际应用中,消息过期是一个绕不开的话题。无论是日志数据的定期清理、业务事件的临时存储,还是磁盘空间的合理管控,都需要一个完善的消息过期机制。Kafka 作为高吞吐的分布式消息系统,提供了灵活而强大的消息过期策略,让开发者可以根据业务需求精细化管理数据生命周期。
Jinkxs3 天前
kafka·rabbitmq·skywalking
SkyWalking - Kafka _ RabbitMQ 消息链路追踪支持👋 大家好,欢迎来到我的技术博客! 📚 在这里,我会分享学习笔记、实战经验与技术思考,力求用简单的方式讲清楚复杂的问题。 🎯 本文将围绕SkyWalking这个话题展开,希望能为你带来一些启发或实用的参考。 🌱 无论你是刚入门的新手,还是正在进阶的开发者,希望你都能有所收获!
犬小哈3 天前
分布式·kafka·rocketmq
滴滴二面:你项目为什么选择 RocketMQ,而不是 Kafka? 我:支支吾吾....在线 Java 面试刷题(已更新239题,图文并茂):https://www.quanxiaoha.com/java-interview