kafka中topic的数据抽取不到hdfs上问题解决

在上一个博客中有一个案例:

将json文件抽取到kafka的消息队列(topic)中,再从topic中将数据抽取到hdfs

https://blog.csdn.net/qq_62984376/article/details/143759037?spm=1001.2014.3001.5501

我们在从kafka中topic的数据抽到hdfs上的时候会出现 flume不报错,但也不抽取的情况

就卡在页面不动,hdfs上自然也没有数据产生

解决办法:

其实这个也很简单,只需要在 /root/.flume下删除如图文件即可

再次执行flume命令就可以抽取成功了

相关推荐
AI 小老六2 小时前
Google AX 控制面拆解:分布式 Agent 如何把断点恢复、审计策略和执行调度收进同一条链路
人工智能·分布式·后端·ai·架构·ai编程
functionflux2 小时前
kafka-python:Python 生态中最成熟的 Kafka 客户端
分布式·python·其他·kafka
kyle~6 小时前
DDS分布式实时系统---自省机制
开发语言·分布式·机器人·c#·接口·ros2
q21030633727 小时前
kafka启动几秒后挂了,重启多次无果
分布式·kafka
凯源智能7 小时前
工商业分布式光伏箱变智能监控落地实战
分布式·箱变测控·光伏箱变测控装置·箱变监控系统·箱式变测控装置
沂水弦音8 小时前
软控 EI 系列模块优势与竞品对比分析:面向 EtherCAT 分布式 I/O 的工程选型视角
分布式·制造·工业自动化·ethercat·io模块
木心术19 小时前
在NVIDIA DGX Spark上部署NemoClaw的实际操作方案以及实际应用便利性。
大数据·分布式·spark
kuokay9 小时前
MLOps 与 AIOps 的核心概
人工智能·分布式·大模型·agent·llama
abcy0712139 小时前
在Python 中使用Celery和Kafka进行消息队列的生产者和消费者实现
python·kafka
openFuyao9 小时前
openFuyao InferNex:云原生分布式 LLM 推理加速套件——从生产痛点到算力的极致释放
分布式·云原生·ai原生·openfuyao·多样化算力