Hive基於Spark臨時表創建分區表

Question

我有一個帶有DATE_KEY列的 Spark 臨時表spark_tmp_view 。 我正在嘗試創建一個 Hive 表（不將臨時表寫入鑲木地板位置。我嘗試運行的是spark.sql("CREATE EXTERNAL TABLE IF NOT EXISTS mydb.result AS SELECT * FROM spark_tmp_view PARTITIONED BY(DATE_KEY DATE)")

我得到的錯誤是mismatched input 'BY' expecting <EOF>我試圖搜索但仍然無法弄清楚如何從 Spark 應用程序中執行此操作，以及如何在之后插入數據。 有人可以幫忙嗎？ 非常感謝。

Answer 1

PARTITIONED BY是正在創建的表定義的一部分，因此它應該在...AS SELECT...之前，請參閱Spark SQL 語法。