删除namenode后从HDFS恢复文件

Question

我的namenode服务器在本周末遭到黑客攻击，/ usr/local/hadoop目录不再存在。是否仍可以恢复存储在HDFS上的文件？ Datanodes是可访问的，每个都包含层次blk _ {...}数据中的某个地方。

Answer 1

如果您没有名称dir的任何复制/备份，恢复数据将是一项相当困难的任务。 datanode不知道任何文件的概念，只有块。所有数据都存在于这些块中，但您必须手动重建块中的文件。如果你有一些重要性非常高的特定文件，并且没有那么多的数据，你可以通过块来筛选你想要找的东西，但我没有意识到比这更好的东西。

这就是为什么有多种方式来冗余地存储命名空间的多个拷贝，例如，通过在dfs.namenode.name.dir属性中指定多个目录，并使用辅助或备用Namenode（请参阅https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-hdfs/HdfsUserGuide.html#Secondary_NameNode），它们充当存储名称空间副本的远程位置。