2012-03-21 64 views
3

我想使用Azkaban进行周期性Hive作业,我已经浏览了Azkaban文档,并且它似乎默认情况下不支持Hive作业,您知道我该如何使用这两种作业?如何在Azkaban上使用Hive作业?

我认为,我将不得不作为Azkaban中的“命令工作”运行Hive作业,但也许有人已经完成了它。
我曾经使用Oozie一段时间,但它没有达到我的需要。

谢谢。

回答

3

现在我们没有简单的方法。你当然可以进入HiveCliDriver并从那里做,但它不是最理想的...或者,只需将它作为命令行工作来运行即可。我们在LI使用不同的系统。我希望能很快加入这个能力,但不知道什么时候有机会。

+0

现在Hive支持有何进展? – auny 2013-02-26 14:14:20

+0

你能给出任何有关可用于从Azkaban运行HIVE作业的Hack的指示吗? – auny 2013-02-27 07:53:32

+0

我们确实添加了这个功能,并将其添加为Azkaban 2推出的一部分:https://groups.google.com/d/topic/azkaban-dev/Mc1_gpsQ7uw/discussion。实际的Hive工作流程类型应该在下周左右到达github。如果你在硅谷,理查德将在下周介绍这项工作:http://www.meetup.com/Open-Data-Bay-Area/events/105644322/?a=co1.3_grp&rv=co1.3否则,请留意公开名单。 – 2013-02-28 07:05:35

1

自Azkaban 2.1起,支持Hive作业。有关详细信息,请参阅documentation

相关问题