如何使用spark scala將數據幀轉換為RDD並將其存儲在cassandra中

Question

如何將數據幀轉換為 RDD 並將其存儲在 Spark Scala 的 Cassandra 中。 考慮一個像下面這樣的例子，

emp_id| emp_city|emp_name

 1|Hyderabad| ram
 4| Banglore| deeksha

這里我僅使用 3 列作為示例，但實際上我需要處理 18 列。

Answer 1

可以直接保存DF，無需轉換為RDD。

df.write.format("org.apache.spark.sql.cassandra").options(Map( "table" -> "employee", "keyspace" -> "emp_data")).save()

謝謝。