kafka

Devin~Y12 小时前
java·spring boot·redis·mysql·spring cloud·kafka·kubernetes
大厂Java面试实录:Spring Boot/Cloud、Kafka、Redis、K8s 与 Spring AI(RAG/Agent)三轮连环问你面前坐着两个人:业务场景:公司做一个内容社区 + UGC 短视频平台,新增 AIGC 智能创作/智能客服能力。你(小Y)应聘 Java 后端。
frankfishinwater1 天前
分布式·架构·kafka
Kafka 代码架构分析Apache Kafka 是一个分布式事件流平台,采用 分层模块化 设计,主要分为以下几个核心模块:这是 Kafka 提供给开发者使用的客户端库,包含: 以下是Kafka客户端组件的路径与职责的表格化整理:
隔壁寝室老吴2 天前
分布式·kafka
使用Flink2.0消费低版本的Kafka目前我们线上使用的Flink2.0版本,其中使用的Kafka版本为4.0.0,所以使用的flink-kafka-connector版本为4.0.1-2.0,所以我们使用的kafka-clients为4.0版本,但是在消费低版本的kafka时报了以下错误:
indexsunny2 天前
java·spring boot·微服务·面试·kafka·消息队列·电商
互联网大厂Java面试实战:Spring Boot微服务与Kafka消息队列深度解析在一个知名互联网大厂的面试现场,严肃的面试官与搞笑的水货程序员谢飞机展开了一场关于Java技术栈的深度对话。本次面试聚焦于Spring Boot微服务架构和Kafka消息队列在电商场景中的应用。
富士康质检员张全蛋2 天前
分布式·kafka
Kafka架构 主题中的分区分区是隶属于主题之下的。第一个图满足了最基本的消息的发布订阅,但是kafka是一个高吞吐量的消息队列,假如producer生产的速度远远大于consumer的消费能力,那么会造成topic下的数据堆积。
富士康质检员张全蛋2 天前
分布式·kafka
kafka 环境部署kafka是非常依赖zk的,无论是kafka的broker,还是producer,consumer,这些都会有源数据的信息保存在zk上面。
富士康质检员张全蛋2 天前
kafka
Kafka架构 Kafka核心概念Broker: Kafka 的基本单元,负责存储和传递消息。一个 Kafka 集群由多个Broker组成。
FL4m3Y4n2 天前
c++·分布式·kafka
分布式消息推送系统协议设计【C++ grpc kafka】分布式这一概念在后端开发中是必不可少的话题。之前腾讯一面的面试官问了我项目的一个问题,“假如你这个系统不仅仅是面对一个大学里的学生,而是全国所有的大学生,你要怎么考虑设计呢?” 回答这个问题核心从这几个方面来考虑: 数据分片 一致性分布式共识 高可用 负载均衡 持久化 这里基于C++,grpc,kafka,mysql,redis实现一种分布式消息推送系统
小的~~2 天前
kafka·linq·甘特图
Kafka消费端周期性停顿,导致工厂设备甘特图失准在工厂的 IoT 场景中,我们实时采集设备的运行状态(运行、停机、故障等)。数据流向如下:设备传感器 -> Kafka(原始状态) -> Spring Boot 实时计算 -> Kafka(明细数据) -> Spring Boot 聚合写入 -> Doris
江畔何人初2 天前
运维·服务器·分布式·云原生·kafka·rabbitmq
Kafka 消息队列概念及与RabbitMQ 的区别现在只要聊到分布式系统、微服务、日志采集、实时计算,Kafka 基本都是绕不过去的一个名字。很多人第一次接触 Kafka,都会先给它贴一个标签:消息队列。这么说对不对?其实没错,但如果只停留在“消息队列”这四个字上,又容易把 Kafka 看简单了。
indexsunny3 天前
java·spring boot·redis·面试·kafka·oauth2·microservices
互联网大厂Java求职面试实战:Spring Boot微服务在电商场景中的应用与挑战在互联网大厂的Java求职面试中,面试官和求职者之间往往会展开一场技术与业务深度结合的问答。本文通过一个虚拟的面试场景,围绕电商业务下的Spring Boot微服务架构展开,涉及核心Java技术栈、数据库、缓存、消息队列、安全等多个点,帮助读者理解面试中如何结合业务深度回答问题。
百结2143 天前
分布式·zookeeper·kafka
zookeeper+kafka消息队列群集部署修改 zoo.cfg:修改 config/server.properties:修改 zoo.cfg:启动服务
白露与泡影3 天前
学习·zookeeper·kafka
从零学习Kafka:ZooKeeper vs KRaft在 Kafka 的演进史中,抛弃 ZooKeeper 模式,拥抱 KRaft 模式这一变化被认为是其架构上最重要的一次变革。本文我们就来讨论 Kafka 为什么要抛弃 ZooKeeper,以及 KRaft 的设计思路。
Devin~Y3 天前
java·spring boot·redis·kafka·spring security·jwt·oauth2
大厂 Java 面试实战:Spring Boot 微服务 + Redis 缓存 + Kafka 消息 + Kubernetes + RAG(小Y水货翻车记)面试官:我们先从登录开始。你用 Spring Boot 写一个登录接口,密码如何存储?小Y:登录嘛,就一个 /login,然后查数据库比对密码……密码一般用 MD5 加盐?
indexsunny4 天前
java·spring boot·redis·微服务·eureka·kafka·spring security
互联网大厂Java面试实录:微服务+Spring Boot在电商场景中的应用本文通过一个模拟的互联网大厂Java求职者谢飞机的面试故事,围绕电商场景展开,涵盖Java核心技术、Spring Boot微服务架构、数据库ORM、消息队列等技术栈。面试官严肃提问,谢飞机幽默应对,既展现简单问题的准确回答,也反映复杂问题的模糊回答。文章最后详细解析每轮问题的答案,帮助小白理解技术与业务结合的实战应用。
Jackyzhe4 天前
学习·zookeeper·kafka
从零学习Kafka:ZooKeeper vs KRaft在 Kafka 的演进史中,抛弃 ZooKeeper 模式,拥抱 KRaft 模式这一变化被认为是其架构上最重要的一次变革。本文我们就来讨论 Kafka 为什么要抛弃 ZooKeeper,以及 KRaft 的设计思路。
工作log4 天前
spring boot·elk·kafka
从零搭建 ELK + Kafka 日志收集系统(Spring Boot + Logback 直连 Kafka)在生产环境中,微服务日志分散在各个服务器上,排查问题需要登录多台机器,效率极低。本文将带你从零开始,搭建一套完整的应用日志 → Kafka → ELK 日志收集管道,实现日志的集中存储、实时搜索与可视化。你将学会:
QC·Rex4 天前
kafka·rabbitmq·rocketmq
消息队列架构设计 - Kafka/RocketMQ/RabbitMQ 深度对比与实战摘要:在分布式系统和高并发架构中,消息队列扮演着至关重要的角色。本文深入剖析 Kafka、RocketMQ、RabbitMQ 三大主流消息队列的核心架构、性能特点和适用场景,通过真实代码示例和架构图解,帮助开发者掌握消息队列选型方法和实战技巧。文章涵盖消息队列的核心概念、架构设计模式、性能优化策略,以及在高并发场景下的最佳实践,为构建可靠的消息驱动系统提供全面指导。
是垚不是土4 天前
linux·运维·分布式·ai·kafka·运维开发
Kafka 故障排查周期长?试试 Kdoctor为什么做这样一个工具?其实说来惭愧,原因就一个:Kafka 实际生产排障经验不足。前段时间碰到了很多 Kafka 的问题,而Kafka服务问题排查起来特别耗费时间,如果你无法快速的定位问题、发现问题,那么哪怕你分析问题的大模型再厉害,找不到问题那又谈何解决呢?