在Hadoop中为中间键使用set/list数据类型

Question

在Apache Hadoop map-reduce程序中，在映射器的输出中使用sets/lists作为键的选项有哪些？

我最初的想法是使用ArrayWritable作为键类型，但这是不允许的，因为该类不执行WritableComparable。我是否需要定义一个自定义类，或者是否有其他一些类似Hadoop库中的类可以充当键？

Answer 1

我以为ArrayWritable实现了Writable，它是WritableComparable的超级接口。

你子类ArrayWritable？根据文档，您需要对其进行子类化，以便可以设置数组要存储的对象的类型。例如：

public class TextArrayWritable extends ArrayWritable { 

    public TextArrayWritable() { 
     super(Text.class); 
    } 
} 

结帐ArrayWritable javadocs。