從 spark.sql 中檢索 df：[PARSE_SYNTAX_ERROR] 'SELECT' 處或附近的語法錯誤

Question

我正在使用數據塊筆記本，我想從 SQL 中的 Spark 執行中檢索 dataframe。 我有：

statement = f""" USER {db}; SELECT * FROM {table}
"""

df = spark.sql(statement)
display(df) 

但是，與我在筆記本的 SQL 單元格中發出相同語句時不同，我收到以下錯誤：

[PARSE_SYNTAX_ERROR] Syntax error at or near 'SELECT': extra input 'SELECT'(line 1...

我哪里錯了？

Answer 1

我試圖在我的環境中重現相同的結果並得到以下結果：

這是我的示例演示表Persons 。

使用此代碼創建 dataframe，如下圖所示。

df = sqlContext.sql("select * from Persons")
display(df)