我相信以下所有命令都可用于将hdfs文件复制到本地文件系统。什么是差异/情况亲/缺点。 (Hadoop新手在这里)。hadoop fs -text vs hadoop fs -cat vs hadoop fs -get
hadoop fs -text /hdfs_dir/* >> /local_dir/localfile.txt
hadoop fs -cat /hdfs_dir/* >> /local_dir/localfile.txt
hadoop fs -get /hdfs_dir/* >> /local_dir/
我的拇指规则是为了避免对大文件使用'文本'和'猫'。 (我用它来复制我的MR作业的输出,这在我的用例中通常较小)。
-text只能使用zip和TextRecordInputStream格式。 – davek 2014-09-18 18:43:04