更新hadoop HDFS文件

Question

我是Hadoop的新手。我一直在阅读HDFS，主要是关于“一次写作，随时阅读”。我有一个用例，我可能需要修改HDFS中存储的文件。我一直在研究是否有任何方法来做到这一点。

我的问题是可以将HDFS文件加载到HBase中，进行修改并将其保存回HDFS中，并删除原始文件。如果可行，请让我。

Answer 1

如果您需要更新文件中的值，您可以更好地使用HBase。您仍然可以通过TableInputFormat和TableOutputFormat在MR作业中使用HBase表。如果你想附加数据，你可以使用任何支持hdfs append的hadoop版本，例如0.20.205.0。