kafka

富士康质检员张全蛋1 天前
分布式·kafka
Kafka的操作 生产消息生产者就是生产一条一条的消息,然后发送到Kafka。而发送到Kafka的过程当中需要去指定一个topic,这条消息要存储在哪个主题当中。消费者就可以从这个主题当中进行消息的消费了。
Zhu7582 天前
kafka·kubernetes·apache
在k8s环境部署Apache Kafka 集群架构,combined模式,无SSL配置Apache Kafka在Docker环境下多种架构,及各架构下多种模式,包括有无SSL配置的部署配置,都在其他文章介绍了,一键部署可用,最多修改一点业务适配的内容。 在k8s环境部署,比较麻烦,官网没提供helm charts,没有yaml文件参考。业界有商用付费版,个人学习只考虑免费或者开源社区版。后续会单独测试strimzi.io 提供的社区版。
霸道流氓气质2 天前
windows·spring boot·kafka
Windows 本地搭建 CDC 全链路测试环境(Kafka+Canel+binlog+SpringBoot)MySQL Binlog CDC 全链路实现详解:https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/162845686
李昊哲小课3 天前
分布式·kafka
ubuntu26.04搭建kafka集群完整主要修改以下五个参数:在所有节点刷新环境变量生成结果:注意:在每个节点都要执行一次执行结果:在每个节点分别启动
csdn2015_3 天前
分布式·kafka
kafka如何保证消息的顺序Apache Kafka 本身是为高吞吐量而设计的,它天生支持分布式系统和大规模消息处理,因此在设计时并没有直接保证消息的顺序。但是,你可以通过几种策略来确保消息的顺序性,尤其是在特定场景下:
csdn2015_3 天前
数据库·分布式·kafka
kafka如何确保消息不丢失在使用Apache Kafka时,确保消息不丢失是一个非常重要的需求,特别是在构建可靠、高可用的数据传输系统中。Kafka通过几个关键机制和最佳实践来保证消息的可靠性,主要包括以下几点:
wuqingshun3141594 天前
分布式·kafka
说一下 Kafka 中关于事务消息的实现?
qiu_lovejun9984 天前
linux·redis·docker·kafka·rabbitmq·rocketmq
linux安装docker和redis和rabbitmq和nginx和rocketmq和kafka
weixin_439930644 天前
kafka
Kafka 基础概念整理以银行交易系统为例。用户发起转账、刷卡消费、还款或理财申购之后,交易系统通常不只需要完成交易入账,还会触发风控、反洗钱、清算、客户通知、账务核算、数据分析等下游系统。
Devin~Y7 天前
java·spring boot·redis·elasticsearch·spring cloud·微服务·kafka
电商场景下的Java面试实战:从Spring Boot微服务到Kafka、Redis与AI RAG场景:某互联网大厂电商事业部,招聘 Java 后端工程师,主做「商品与交易中台 + AI 推荐」方向。
AllData公司负责人7 天前
大数据·数据库·hive·mysql·kafka·实时同步
数据同步平台|AIIData数据中台实现MySQL、Hive、Kafka 一键接入Doris企业推进数字化转型过程中,普遍遭遇多源异构数据相互割裂形成数据孤岛、数据同步延迟偏高、配置操作依赖人工重复运维等难题。
whaledown9 天前
java·jvm·数据库·spring boot·微服务·面试·kafka
互联网大厂Java求职面试三轮提问详解(涵盖Spring Boot、微服务、Kafka等核心技术)互联网大厂Java面试竞争激烈,掌握关键技术及业务场景尤为重要。本文以面试官和羽砚程序员的幽默对话,模拟真实面试环境,分三轮提问,从简单到复杂逐步引导,助力求职者系统掌握核心技能。
梦想的颜色10 天前
安全·docker·中间件·kafka·消息队列·docker-compose·后端开发
【Docker部署插件】:使用 Docker 部署生产级 Kafka 完整版教程本文提供可直接复制的生产开发级docker-compose.yml,内置 ZooKeeper 协调、Kafka 消息服务、Kafdrop 可视化管理面板,解决容器最经典的Broker may not be available、宿主机无法连接、重启数据丢失、内外网双访问四大痛点;附带全平台启停命令、Topic 创建 / 生产消费测试、云服务器外网配置、20 + 踩坑修复方案,前端 / 小程序 / Java/Python 开发直接复用。
考虑考虑10 天前
后端·kafka·自动化运维
kafka4安装kafka4的安装,跟以前的有点区别,需要配置点东西备注: 本文是在window环境下安装的修改config文件夹下的server.properties配置下的路径log.dirs
lzhcoder11 天前
java·kafka
Spring Boot 集成 Kafka:先跑通 Demo,再避开那 80% 的人踩过的坑很多人把 Kafka 当消息队列用,觉得 RabbitMQ 能做的事 Kafka 也能做——这个认知恰恰是后面所有问题的根源。Kafka 本质上是一个分布式日志,不是队列。
阿坤带你走近大数据16 天前
大数据·hadoop·flink·kafka
大数据中的各种场景数据倾斜的介绍数据倾斜的本质是分布式系统中负载分配不均。在理想的分布式计算中,数据应均匀分摊到各个节点;但在现实中,往往会变成“一个人干完所有人活,其他人都在等”。
Kyrie_Li12 天前
spring boot·后端·kafka
Spring Boot Kafka 生产级配置全解析:从入门到精通在 Spring Boot 项目中集成 Kafka 时,配置文件往往是开发者的第一道坎。application.yml 中密密麻麻的参数,每个都似懂非懂——抄过来能用,但出了问题完全不知道从哪里排查。
2301_8011847513 天前
分布式·zookeeper·kafka
kafka-zookeeperjdk-kafka-zookeeper都解压后,配置java环境变量cd kafka/binnohup bin/zookeeper-server-start.sh config/zookeeper.properties &
Devin~Y13 天前
java·spring boot·redis·spring cloud·kafka·agent·rag
抖音级短视频推荐与直播带货平台面试实战:从 Java 微服务到 RAG 智能客服全链路解析场景:某头部互联网大厂,业务方向为短视频推荐 + 直播带货电商,主技术栈为 Java、Spring 全家桶、微服务、Kafka、Redis、Elasticsearch、Kubernetes,以及最新接入的 AI RAG 智能客服与内容审核能力。
livemetee13 天前
分布式·kafka
关于【Kafka高可用配置】Kafka 作为分布式消息队列的“王者”,以其极高的吞吐量和优秀的持久化能力著称。但在实际生产环境中,如果配置或使用不当,很容易出现消息丢失、消息重复、消息积压、频繁 Rebalance 等严重问题。