Bash - 如何检查文件是否已上传到hdfs？

Question

I created a folder in hdfs。现在，我想从我的本地文件系统的文件上传到tmp的文件夹，例如：

hdfs dfs -put opt/ibm/labfiles/README.md /user/root/input/tmp 

但我得到的消息：

put: '/user/root/input/tmp': File exists 

我不明白：当我运行测试如果文件存在，我没有看到列出的文件，但该文件夹具有文件大小（4811 bites）。再次，TMP甚至可能不是一个文件夹：

• 我怎么可以看到，如果TMP是一个文件夹？
• 如何查看README.md文件是否在tmp中，或者如果没有，我怎么能把它放在那里？
• 从这里启动SparkShell时，我无法访问该文件（输入路径不存在）。为什么？

Answer 1

根据该tmp是一个文件。如果它是一个目录，它会显示drw_r__r__，注意d，你没有这个，所以它是一个文件。

你应该已经运行：

hdfs dfs -put opt/ibm/labfiles/README.md /user/root/input/tmp/README.md

Answer 2

在情况下，如果tmp目录是已经存在的，你可以直接写信给它省略文件名cataloge：

hdfs dfs -put opt/ibm/labfiles/README.md /user/root/input/tmp/ 

添加额外的“ /'在最后。如果在最后设置“/” - 这将写入目录，否则命令将尝试路径中的最后“/”符号后，创建一个名称的文件