broker

放羊的牧码5 个月前
分布式·zookeeper·kafka·controller·broker·zk·为啥抛弃
Kafka - Kafka 为啥抛弃 Zookeeper?Kafka 为什么要抛弃 ZooKeeper?取代方案是怎样的?因为确实有优化空间。Zookeeper加kafka 的架构,有三层角色:
江中散人8 个月前
云原生·中间件·kafka·paas·broker
【云原生进阶之PaaS中间件】第三章Kafka-4.3.2-broker网络模型kafka broker 在启动的时候,会根据你配置的listeners 初始化它的网络组件,用来接收外界的请求,这个listeners你可能没配置过,它默认的配置是listeners=PLAINTEXT://:9092就是告诉kafka使用哪个协议,监听哪个端口,如果我们没有特殊的要求的话,使用它默认的配置就可以了,顶多是修改下端口这块。这个listeners是支持配置多套的,就是你可以监听多个端口,一个listener就对应着内部这么一套网络模型,我们就介绍一个listener的,多个其实都是一样的,
IT果果日记10 个月前
分布式·kafka·rocketmq·topic·partition·broker·leader
kafka原理看这一篇就够了生产者发送消息给Leader分区副本,并顺序写入到磁盘文件,然后Follower分区副本从Leader分区副本poll消息以保证数据是最新的。kafka将消息写入哪个分区有几下几个原则:
他叫阿来1 年前
consumer·broker·producer·kafka参数
Kafka常用参数kafka broker、consumer、和producer都有很多可配置的参数。本文主要总结日常开发中常用到的参数。其中producer端可以在org.apache.kafka.clients.producer.ProducerConfig 中找到配置项,consumer端可以在org.apache.kafka.clients.consumer.ConsumerConfig中找到各配置项。
他叫阿来1 年前
kafka·consumer·broker·producer
Kafka基本概念Kafka是最初由Linkedin公司开发,是一个分布式、分区的、多副本的、多生产者、多订阅者,基于 zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以用于web/nginx日志、访问日志,消息服务等等。 主要应用场景是:日志收集系统和消息系统。 Kafka主要设计目标如下: