如何使用 hive 外部 hive 表創建一個空的 dataframe？

Question

我正在使用以下內容使用 hive 外部表創建 dataframe (spark scala)。 但是 dataframe 也在其中加載了數據。 我需要一個使用 hive 外部表架構創建的空 DF。 我為此使用火花 scala。

val table1 = sqlContext.table("db.table")

如何使用 hive 外部 hive 表創建一個空的 dataframe？

Answer 1

你可以這樣做：

val table1 = sqlContext.table("db.table").limit(0)

這將為您提供僅包含架構的空 df。 由於惰性評估，它也不會比僅僅加載模式花費更長的時間。