每天几道面试题|Kafka基础概念(一)

文章目录

  • [什么是 Apache Kafka?它是用来解决什么问题的?](#什么是 Apache Kafka?它是用来解决什么问题的?)
  • [Kafka 的主要组件有哪些?它们各自的作用是什么?](#Kafka 的主要组件有哪些?它们各自的作用是什么?)
  • [Kafka 中的生产者和消费者是什么?它们之间的关系是怎样的?](#Kafka 中的生产者和消费者是什么?它们之间的关系是怎样的?)
  • [Kafka 中的分区是什么?为什么要使用分区?](#Kafka 中的分区是什么?为什么要使用分区?)
  • [Kafka 中的消息保证是指什么?有哪些消息保证级别?](#Kafka 中的消息保证是指什么?有哪些消息保证级别?)

Hello 大家好,我是阿月,保持学习,老年痴呆追不上我。学习Kafka的时候,可以考虑从基础概念、架构和应用场景等三个层次着手,今天先来复习基础概念。

什么是 Apache Kafka?它是用来解决什么问题的?

  • Apache Kafka 是一个分布式流处理平台和消息队列系统,设计用于高可靠性、高吞吐量的数据传输,以及实时数据处理应用程序的构建。它解决了大规模数据处理和实时数据流的可靠传输问题。

Kafka 的主要组件有哪些?它们各自的作用是什么?

  • 生产者(Producer):负责向 Kafka 主题发送消息。
  • 消费者(Consumer):从 Kafka 主题订阅并消费消息。
  • 主题(Topic):消息的逻辑容器,数据存储在 Kafka 中的逻辑组织单元。
  • 分区(Partition):每个主题可分成一个或多个分区,每个分区是一个有序的消息队列。
  • 偏移量(Offset):每条消息在分区内的唯一标识符。
  • Kafka 集群:由多个 Kafka 服务器节点组成的集群,负责消息的存储和传输。

Kafka 中的生产者和消费者是什么?它们之间的关系是怎样的?

  • 生产者负责向 Kafka 主题发送消息,消费者则从 Kafka 主题订阅并消费消息。生产者和消费者是独立的客户端程序,彼此之间没有直接联系,它们通过 Kafka 集群进行通信。生产者将消息发送到主题的指定分区,而消费者从一个或多个分区订阅消息,并按照一定的顺序处理消息。

Kafka 中的分区是什么?为什么要使用分区?

  • 分区是 Kafka 主题的物理存储单元,每个分区是一个有序的消息队列。分区使得 Kafka 能够水平扩展,允许集群中的多个服务器并行处理消息。通过分区,Kafka 实现了高吞吐量和负载均衡,同时允许消息持久化和容错处理。

Kafka 中的消息保证是指什么?有哪些消息保证级别?

  • 消息保证指的是 Kafka 提供的消息传递的可靠性保证级别。
  • 主要的消息保证级别包括:
    • 最多一次(At most once):消息可能会丢失,但不会重复传递。
    • 至少一次(At least once):消息可以重复传递,但不会丢失。
    • 精确一次(Exactly once):消息既不会丢失也不会重复传递。
相关推荐
怕浪猫5 小时前
FDE 最大的浪费不是写出有 bug 的代码,而是漂亮地解决了一个错误的问题
面试·架构·github
黄敬峰8 小时前
Next.js 全栈实战:数据清洗、ORM 设计与 AI Prompt 工程最佳实践
面试·github
雨夜之寂11 小时前
雨夜-现在有办法识别是不是ai文章么
后端·面试
pnoker12 小时前
IoT DC3 消息总线:六适配器可插拔设计
物联网·架构·kafka·消息队列·rabbitmq
不正经学生13 小时前
C语言动态内存管理(上):堆上的自由与责任
c语言·开发语言·c++·算法·面试
ssshooter13 小时前
AI 时代你不能不知道的 git worktree
前端·后端·面试
CoderYanger14 小时前
A.每日一题:输入单词需要的最少按键次数 Ⅰ+Ⅱ
java·数据结构·算法·leetcode·面试
cxhello15 小时前
消费者活着、心跳正常、日志干净,但它七天没拉过一条消息
python·kafka
Lost of 程序猿17 小时前
ASP.NET Core Saga 分布式事务深度实战:备件采购跨服务长流程,如何保证“要么全成,要么全回“
分布式·后端·asp.net
XiYang-DING18 小时前
地图城市缓存优化:ApplicationReadyEvent + Caffeine + Redis + Redisson 分布式锁
redis·分布式·缓存