首页 > 解决方案 > 将 15 GB 文件传输到 HDFS 集群的步骤是什么

问题描述

我有一个 20 GB 的文件,根据我的理解,HDFS 集群只不过是协调良好的机器,如果我想传输一个 20 GB 的文件,我该如何将它传输到 HDFS 以及当我们将 i 传输到 HDFS 时内部会发生什么

标签: hdfs

解决方案


文件大小无关紧要。

https://hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-common/FileSystemShell.html

hadoop fs -put /path/to/file hdfs://namenode.address:port/path/in/hdfs

当我们将 i 传输到 HDFS 时内部会发生什么

它被拆分为 HDFS 块并分布到数据节点上


推荐阅读