是否可以在Amazon Elastic MapReduce工作流中添加“组合”步骤？

Question

我指的是联合步骤mentioned on the Hadoop wiki。我一直无法在AWS文档中找到它的参考，我想利用这一步骤。

Answer 1

Combiner的文档将在Apache文档中，而不在AWS文档中。 Amazon Elastic MapReduce支持具有自定义修补程序的Hadoop的0.18.3 and 0.20.2版本。 Apache MR Tutorial提到如何使用组合器功能。调用Job.setCombinerClass()来设置组合器类。