02 - 步骤 Kafka consumer

简介

Kafka consumer 步骤,用于连接和消费 Apache Kafka 中的数据,它可以作为数据管道的一部分,将 Kafka 中的数据提取到 Kettle 中进行进一步处理、转换和加载,或者将其直接传输到目标系统中。

使用

场景

我需要订阅一个Kafka的数据,让Kettle 进行下一步的数据清洗。

1、将Kafka consumer 对象拖出来到面板

2、配置Kafka consumer

需要配置的信息

transformation直接new就行

在配置返回的字段

这样子就可以去消费kafka的消息了

3、启动转换

这样子就是成功了

我们可以在previewdata看到返回的数据

相关推荐
方圆想当图灵1 小时前
如何让百万 QPS 下的服务更高效?
分布式·后端
Dobby_056 小时前
【Hadoop】分布式文件系统 HDFS
大数据·hadoop·分布式
哈哈很哈哈6 小时前
Spark 核心 RDD详解
大数据·分布式·spark·scala
项目題供诗6 小时前
Hadoop(十一)
大数据·hadoop·分布式
zru_96028 小时前
Kafka核心概念深入浅出:消费者组(Consumer Group)机制全解析
kafka
学习中的阿陈11 小时前
Hadoop伪分布式环境配置
大数据·hadoop·分布式
CesareCheung11 小时前
JMeter分布式压力测试
分布式·jmeter·压力测试
thginWalker12 小时前
面试鸭Java八股之Kafka
kafka
失散1313 小时前
分布式专题——10.5 ShardingSphere的CosID主键生成框架
java·分布式·架构·分库分表·shadingsphere
winfield82114 小时前
Kafka 线上问题排查完整手册
kafka