02 - 步骤 Kafka consumer

简介

Kafka consumer 步骤,用于连接和消费 Apache Kafka 中的数据,它可以作为数据管道的一部分,将 Kafka 中的数据提取到 Kettle 中进行进一步处理、转换和加载,或者将其直接传输到目标系统中。

使用

场景

我需要订阅一个Kafka的数据,让Kettle 进行下一步的数据清洗。

1、将Kafka consumer 对象拖出来到面板

2、配置Kafka consumer

需要配置的信息

transformation直接new就行

在配置返回的字段

这样子就可以去消费kafka的消息了

3、启动转换

这样子就是成功了

我们可以在previewdata看到返回的数据

相关推荐
Tony Bai1 小时前
【分布式系统】03 复制(上):“权威中心”的秩序 —— 主从架构、一致性与权衡
大数据·数据库·分布式·架构
雨中飘荡的记忆9 小时前
Kafka入门:从零开始掌握消息队列
kafka
txinyu的博客9 小时前
HTTP服务实现用户级窗口限流
开发语言·c++·分布式·网络协议·http
独自破碎E9 小时前
RabbitMQ中的Prefetch参数
分布式·rabbitmq
深蓝电商API10 小时前
Scrapy+Rredis实现分布式爬虫入门与优化
分布式·爬虫·scrapy
indexsunny11 小时前
互联网大厂Java面试实战:Spring Boot与微服务在电商场景的应用解析
java·spring boot·redis·微服务·kafka·gradle·maven
回家路上绕了弯11 小时前
定期归档历史数据实战指南:从方案设计到落地优化
分布式·后端
rchmin12 小时前
Distro与Raft协议对比分析
分布式·cap
小辉笔记12 小时前
kafka原理总结
分布式·kafka
实战项目12 小时前
分布式协作入侵检测系统的报警信息管理
分布式