簡體   English   中英

如何使用Spark將scala對象存儲到cassandra表上

[英]how to store scala object onto cassandra table using spark

我有一個Scala模型類,我想將其對象存儲到Cassandra表上.Cassandra和Scala類變量聲明的列名順序不匹配。

並且在Cassandra表中有一個附加列,在Scala類變量列表(tr_tag Text)(tr_tag Text)沒有該列,但是我無法做到這一點。

沒有插入數據。 請幫助我解決此問題。

模型scala類:

class THData() extends Serializable{
     var s_id: java.lang.Long = null
     var a_id: String = null
     var s_typ: String= null
     var s_dt: java.util.Date= null
     var t_s_id: String= null
     var a_s_no: String= null
     var avg_sp: java.lang.Float = null
}

將對象插入cassandra的方法:

def insert(data: THData) {
     var em=sc.parallelize(Seq(data))
     em.saveToCassandra("ap", "t_s_data")
}

Cassndra表的列名如下:

sid,援助,典型,sdt,tsid,asno,avgsp,tr_tag

我認為您應該按照文檔中所述修改列名稱:

在此處輸入圖片說明

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM