首页 > 解决方案 > 调试hadoop文件要求

问题描述

我有一个大约 1gb 大小和大约19955931行长的文件,当我将它传送到 hadoop 时,它返回空数据。

但是,如果我使用具有相同行数的 head 创建了一个新文件

head -19955931 my.log > my_new_copy.log

Hadoop 返回正确的非空数据。

我对这种行为完全感到困惑,hadoop 是否需要特定的元文件格式?

标签: hadoopmapreducehadoop2

解决方案


推荐阅读