一个存放消息的组件
生产者， 消费者， broker三部分
消息队列的两种模式
*生产者和消费者（消费者主动拉取信息，然后删除）
*发布订阅（）
kafka基础架构 *一个topic有多个partition（副本（信息非全量），有分leader和follower）
*消费者组（只消费leader的）（一个分区一个消费者处理）
*zookeeper（）
安装
修改broker id
修改ZK地址
修改数据存放路径
生产者原理：
流程：数据------缓存------集群
数据量先写道缓存 到达指定批次数量（batch） （默认16K），或等待时间(linger)（默认0秒）就发送
*可以异步发送
*可以异步发送回调
*同步发送
分区 *1有指定的-指定partution
*2有key的-根据key和toipc的partition数取余，
*3啥没有的-粘性分区（随机，批次满了或时间到在随机下一个）
怎么提高吞吐量
*加大批次（batch）（默认16K）
*等待时间(linger)（默认0
*压缩
*修改缓冲区大小（默认32M）
幂等性 ：（无论发送多少次，都只保存一条）
去重性（最多一次）配置acks
可靠性（最少一次）
有序性（开启幂等性，或者设置单分区）
架构
消费者
broker
broker
topic
partition分区
可靠性（副本（leader,folloer））
生产者和消费者只对leader操
一个分区只有一个消费者
消费者
zookeeper
broker.ids
leader
辅助选举
生产者API
*send()异步发送
*可以回调可以实现同步
*批量发送设置（batch） （默认16K），或等待时间(linger)默认0 ）
*配置acks
(acks=0或者1)最多一次（去重）
(acks=-1或者retries>0)最少一次（可靠）
消费者API可以自动提交 或者手动提交（单条或者批量提交）
支持事务y
隔离级别读未提交,读提交