从Cloudera迁移到Hortonworks

Question

由于某种原因，我们的客户计划将Hadoop环境从Cloudera迁移到HortonWorks。

如果有任何标准文档指定需要照顾这种迁移的步骤，是否有人可以提供给我？

在其他工作中，我们可以使用hadoop distcp命令将hdfs数据从Cloudera环境复制到Hortonworks。

Answer 1

是的，你可以使用distcp。

您也可以根据您要迁移的CDH版本以及您正在迁移的HDP版本进行迁移。它还将取决于您在hadoop中使用的服务以及这些模式的版本。例如，如果您在Cloudera中使用Hive的X.3版本，并且您正在Hortonworks中迁移到X.2，则模式会出现问题。虽然理论上可行，但移植到位看起来确实有风险和麻烦。

我建议使用distcp路径，这样您可以在停用之前验证Cloudera集群中新Hortonworks集群中的数据。