scala - 使用 spark 从 hdfs 读取文本文件的问题

问题描述

我最近开始学习 hadoop 和 spark，但在从 hdfs 读取文本文件时遇到问题。我已经在这里完成了几篇文章，但仍然没有得到它。我会很高兴有一个协助。

hadoop fs -ls /user/training -rw-r--r-- 1 training supergroup 264875 2019-07-10 16:53 /user/training/book.txt

scala> val readme= sc.textFile("hdfs://localhost:8020/user/training/book.txt")
scala> val readme= sc.textFile("/user/training/book.txt")
scala> val readme= sc.textFile("/book.txt")

scala> readme.count

我尝试了上述所有代码，但一直出错

标签： scalaapache-sparkhadoophdfs

scala - 使用 spark 从 hdfs 读取文本文件的问题

问题描述

解决方案

推荐阅读