kafka中topic的数据上传到hdfs中,需要先上传几个jar包到flume下的lib中

把kafka中topic的数据上传到hdfs

然后配置kafka-hdfs的配置文件把kafka中topic的数据上传到hdfs

最后在flume中运行

 bin/flume-ng agent -c conf/ -f conf/kafka-hdfs.conf -n agent -Dflume.root.logger=INFO,console

即能把数据商城到hdfs指定的目录中


相关文章: