kafka中topic的数据抽取不到hdfs上问题解决
将json文件抽取到kafka的消息队列（topic）中，再从topic中将数据抽取到hdfs。我们在从kafka中topic的数据抽到hdfs上的时候会出现 flume不报错，但也不抽取的情况。其实这个也很简单，只需要在 /root/.flume下删除如图文件即可。就卡在页面不动，hdfs上自然也没有数据产生。再次执行flume命令就可以抽取成功了。
·
在上一个博客中有一个案例：
将json文件抽取到kafka的消息队列（topic）中，再从topic中将数据抽取到hdfs
https://blog.csdn.net/qq_62984376/article/details/143759037?spm=1001.2014.3001.5501
我们在从kafka中topic的数据抽到hdfs上的时候会出现 flume不报错，但也不抽取的情况
就卡在页面不动，hdfs上自然也没有数据产生
解决办法：
其实这个也很简单，只需要在 /root/.flume下删除如图文件即可
再次执行flume命令就可以抽取成功了
魔乐社区（Modelers.cn) 是一个中立、公益的人工智能社区，提供人工智能工具、模型、数据的托管、展示与应用协同服务，为人工智能开发及爱好者搭建开放的学习交流平台。社区通过理事会方式运作，由全产业链共同建设、共同运营、共同享有，推动国产AI生态繁荣发展。
更多推荐
9
0- 0
已为社区贡献1条内容
所有评论(0)