2014-09-29 114 views
2

我是flume和hadoop的新手。我有一个疑问:我们是否可以在没有配置hadoop的情况下使用flume?没有hadoop的Apache Flume

任何人都可以分享他们的知识吗?

回答

4

是Flume可以完全独立于hadoop工作。但是它确实对HDFS有一些包依赖关系。如果您不打算使用HDFS接收器,则可以在没有Hadoop的情况下使用它

+1

@Amar ...我们可以使用file_roll接收器吗? – user3797438 2014-09-29 18:19:41

+1

是的,你可以文件滚水槽没有hadoop – Amar 2014-09-29 18:20:43

+0

谢谢你的回复...我可以共享file_roll的配置文件...我有它...但它显示的目录不为空 – user3797438 2014-09-29 18:22:04

0

是的!至于我最近的flume配置[source = Twitter,channel = memory],我使用loggerSink将流式数据放入文件系统的日志文件中(unix文件目录),只需要为数据做些事情有道理。虽然作为flume安装的一部分(HDFSSink,HBaseSink,IRC,File Roll,请查看https://flume.apache.org/FlumeUserGuide.html了解更多详细信息和用法),但您也可以使用其他接收器,也可以创建一个新的接收器。