如何使用 hive 外部 hive 表创建一个空的 dataframe？

Question

我正在使用以下内容使用 hive 外部表创建 dataframe (spark scala)。 但是 dataframe 也在其中加载了数据。 我需要一个使用 hive 外部表架构创建的空 DF。 我为此使用火花 scala。

val table1 = sqlContext.table("db.table")

如何使用 hive 外部 hive 表创建一个空的 dataframe？

Answer 1

你可以这样做：

val table1 = sqlContext.table("db.table").limit(0)

这将为您提供仅包含架构的空 df。 由于惰性评估，它也不会比仅仅加载模式花费更长的时间。