kafka中topic的数据抽取不到hdfs上问题解决

在上一个博客中有一个案例:

将json文件抽取到kafka的消息队列(topic)中,再从topic中将数据抽取到hdfs

https://blog.csdn.net/qq_62984376/article/details/143759037?spm=1001.2014.3001.5501

我们在从kafka中topic的数据抽到hdfs上的时候会出现 flume不报错,但也不抽取的情况

就卡在页面不动,hdfs上自然也没有数据产生

解决办法:

其实这个也很简单,只需要在 /root/.flume下删除如图文件即可

再次执行flume命令就可以抽取成功了

相关推荐
ZCBUS实时计算19 分钟前
信创混合存储架构落地实战|基于 ZCBUS 实时计算构建证券高可用实时风控数仓
大数据·架构·flink·kafka·dba
国科安芯4 小时前
ASC8T245S:把 8 位并行总线稳稳“跨过“电压域的双电源收发器
网络·分布式·单片机·嵌入式硬件·fpga开发·架构
MetaLite7 小时前
Spring-Scheduled多实例重复执行怎么办-Redis分布式锁如何只让一个节点运行
redis·分布式·spring
Code知行合壹7 小时前
数据中台设计
大数据·分布式·spark
攻城有术8 小时前
专项攻克——redis分布式锁-用LUA脚本解决setNX锁不释放问题
redis·分布式·lua
Sayai9 小时前
Kafka 去 ZooKeeper 实战评估:KRaft 模式架构解析与生产落地决策指南
zookeeper·架构·kafka
会博通·代码搬运工10 小时前
双层PDF技术实现与档案数字化系统的API集成实践
数据库·人工智能·分布式·python·计算机视觉·api集成
天远Date Lab10 小时前
零信任架构实战:基于天远天远风控经营异常预警构建分布式企业合规监控网关
人工智能·分布式·架构
StarRocks_labs10 小时前
StarRocks x Fluss x Paimon 湖流一体方案:构建秒级响应、湖流一体的实时数据引擎
starrocks·kafka·lambda·查询·paimon·fluss·湖流一体
小白酷爱学习1 天前
鸿蒙OS的开发语言与工具链:如何驾驭全新开发生态!
分布式·华为·架构·harmonyos