kafka中topic的数据抽取不到hdfs上问题解决

在上一个博客中有一个案例:

将json文件抽取到kafka的消息队列(topic)中,再从topic中将数据抽取到hdfs

https://blog.csdn.net/qq_62984376/article/details/143759037?spm=1001.2014.3001.5501

我们在从kafka中topic的数据抽到hdfs上的时候会出现 flume不报错,但也不抽取的情况

就卡在页面不动,hdfs上自然也没有数据产生

解决办法:

其实这个也很简单,只需要在 /root/.flume下删除如图文件即可

再次执行flume命令就可以抽取成功了

相关推荐
张伯毅25 分钟前
Flink SQL 支持 kafka 开启 kerberos 权限控制.
sql·flink·kafka
MZWeiei1 小时前
Zookeeper的选举机制
大数据·分布式·zookeeper
学计算机的睿智大学生1 小时前
Hadoop集群搭建
大数据·hadoop·分布式
一路狂飙的猪1 小时前
RabbitMQ的工作模型
分布式·rabbitmq
miss writer2 小时前
Redis分布式锁释放锁是否必须用lua脚本?
redis·分布式·lua
m0_748254882 小时前
DataX3.0+DataX-Web部署分布式可视化ETL系统
前端·分布式·etl
字节程序员3 小时前
Jmeter分布式压力测试
分布式·jmeter·压力测试
darkdragonking3 小时前
OpenEuler 22.03 不依赖zookeeper安装 kafka 3.3.2集群
kafka
ProtonBase3 小时前
如何从 0 到 1 ,打造全新一代分布式数据架构
java·网络·数据库·数据仓库·分布式·云原生·架构
时时刻刻看着自己的心3 小时前
clickhouse分布式表插入数据不用带ON CLUSTER
分布式·clickhouse