kafka学习1 - 线程、进程消息通信方式、JMS模型、Kafka原理图

1、线程和线程之间的数据交互

两个不同的线程之间是可以通过堆内存的方式进行数据交互的;

T1线程的数据发送得到堆内存,T2线程就可以共享堆内存的数据。

存在的问题:

T1线程发送数据的速率是50/s,T2线程消费的速率是30/s,消费的速率小于生产的速率,就会有大量的数据积压在堆内存或者磁盘文件上,时间长了后,积压的数据就会越来越多,导致影响整个流程的性能。

2、进程和进程之间的数据交互

进程与进程之间的通信可以通过消息中间件的方式

3、Java中实现消息传输的方式[JMS]

Java Message Service

原理图:

1、点对点模式【P2P模式】

这种模式是一个消息只能发送给一个消费者消费,其他消费者是接收不到的,消费者接收到消息后会反馈给Provider生产者说明消息已被接受到,消息被消费完后就会丢失。

2、发布-订阅模式【PS模式】

发布-订阅模式是消费者订阅某个主题的消息,主题的消息可以被多个消费者订阅消费。

ActiveMQ、RabbitMQ、RocketMQ是遵循JMS规范的;Kafka是部分遵循JMS的规范

在大数据场景中我们主要采用kafka作为消息中间件,而在javaEE开发中我们主要采用ActiveMQ、RabbitMQ、RocketMQ作为消息中间件。如果JavaEE和大数据在项目中进行融合,那么kafka是不错的选择。

4、kafka的原理图

在kafka中,通过偏移量的方式标记每个消息,来确保消息的顺序性。

相关推荐
Willliam_william3 分钟前
SVA学习之路(1)— SystemVerilog Assertion简介与实战
学习
im_AMBER12 分钟前
Leetcode 77 数组中的最大数对和 | 统计坏数对的数目
笔记·学习·算法·leetcode
代码游侠17 分钟前
学习笔记——Linux 进程管理笔记
linux·运维·笔记·学习·算法
解局易否结局20 分钟前
GitCode口袋工具开发学习
学习·gitcode
逐辰十七21 分钟前
freertos学习笔记12--个人自用-第18章 资源管理(Resource Management)
笔记·学习
点云SLAM22 分钟前
Redundant 英文单词学习
人工智能·学习·英文单词学习·雅思备考·redundant·冗余的·多余的 、重复的
phantom_11134 分钟前
BeeAI 框架学习记录
学习·ai
豫狮恒35 分钟前
OpenHarmony Flutter 分布式权限管理:跨设备可信访问与权限协同方案
分布式·flutter·wpf·openharmony
TiDB 社区干货传送门40 分钟前
“医疗专业应用+分布式数据底座”:平凯数据库与金唐软件全链路赋能医疗国产化与数字化转型
数据库·分布式
wheelmouse778841 分钟前
Maven构建配置学习笔记
笔记·学习·maven