consumer

基于Kafka2.1解读Consumer原理继上一篇讲Producer原理的文章过去已经一个多月了，今天来讲讲Consumer的原理。其实源码早就读了部分了，但是最近工作比较忙，一直没空写文章。

C++ 实现多线程的生产者(producer) - 消费者(consumer) 模型生产者消费者模型是操作系统中的一种并发编程模型，用于解决生产者和消费者之间的数据共享和同步问题。在该模型中，生产者负责生成数据，并将数据放入一个有限的缓冲区中，而消费者则从缓冲区中取出数据进行处理。两者之间通过共享的缓冲区进行通信。

Kafka Console Client 的 Consumer Group以往使用 kafka-console-consumer.sh 消费 Kafka 消息时并没有太在意过 Consumer Group，在命令行中也不会使用 --group 参数，本文针对 Kafka Console Client 命令行中的 Consumer Group 进行一次统一说明。

珍珠是蚌的眼泪

java_函数式接口结果：在上述例子中，main方法中调用了consumMoney方法，传入了两个参数；consumer的实现形式就是x-> System.out.println("这个手机是："+x+"元")，即：传入一个参数x，然后拼接输出。在consumMoney方法中调用accept方法，按照预定实现形式输出结果。

Kafka常用参数kafka broker、consumer、和producer都有很多可配置的参数。本文主要总结日常开发中常用到的参数。其中producer端可以在org.apache.kafka.clients.producer.ProducerConfig 中找到配置项，consumer端可以在org.apache.kafka.clients.consumer.ConsumerConfig中找到各配置项。

Kafka基本概念Kafka是最初由Linkedin公司开发，是一个分布式、分区的、多副本的、多生产者、多订阅者，基于 zookeeper协调的分布式日志系统（也可以当做MQ系统），常见可以用于web/nginx日志、访问日志，消息服务等等。主要应用场景是：日志收集系统和消息系统。 Kafka主要设计目标如下：

kafka:消费者从指定时间的偏移开始消费(二)我的前一篇博客《kafka:AdminClient获取指定主题的所有消费者的消费偏移(一)》为了忽略忽略掉上线之前的所有消息，从获取指定主题的所有消费者的消费偏移并计算出最大偏移来解决此问题。但这个方案需要使用不常用的AdminClient类，而且如果该主题如果是第一次被消费者拉取消息时，因为得不到消费者的消费偏移，最后的结果，就是从0偏移开始拉取所有消息。并不能真正实现忽略上线之前所有消息的目的。所以我又优化了方案。基本的原理就是使用KafkaConsumer.offsetsForTimes方法获取

飞翔的佩奇

95、Kafka是pull？push？优劣势分析缺点: 如果kafka没有数据，会导致consumer空循环，消耗资源