scala - 如何使用配置单元外部配置单元表创建一个空数据框？

Question

我正在使用以下内容使用 hive 外部表创建数据框（spark scala）。但是数据框也在其中加载了数据。我需要一个使用 hive 外部表的架构创建的空 DF。我为此使用 spark scala。

val table1 = sqlContext.table("db.table")

如何使用配置单元外部配置单元表创建一个空数据框？

标签： scalaapache-spark

Answer 1

你可以这样做：

val table1 = sqlContext.table("db.table").limit(0)

这将为您提供仅包含架构的空 df。由于惰性评估，它也不会比仅仅加载模式花费更长的时间。