hadoop - 看不到我上传到 hadoop 的文件

Question

pscp告诉我，成功了。

pscp -P 22 part-00003 username@172.31.143.131:/home/username/lab2_hdfs

username@172.31.143.131's password:
part-00000                | 758 kB | 758.9 kB/s | ETA: 00:00:00 | 100%

但是当我使用hdfs dfs -ls时，我没有在我的hadoop中看到它，为什么？

标签： hadoopputtypscp

Answer 1

根据您的命令，您刚刚将本地文件传输到远程主机并传输到远程目录 ( /home/username/lab2_hdfs)。在那个阶段根本没有涉及 HDFS，因此不知道新文件。

您可以查看Hadoop 之类的文章：将本地文件复制到 HDFS并使用以下命令

hadoop fs -put part-00003 /hdfs/path