簡體   English   中英

如何將列表傳遞給pyspark中的UserDefinedFunction(UDF)

[英]How to pass list to UserDefinedFunction (UDF) in pyspark

我需要傳遞一個列表作為pyspark中某個UDF的參數。 例:

def cat(mine,mine2):
     if mine is not None and mine2 is not None:
             return "2_"+mine+"_"+mine2

udf_cat = UserDefinedFunction(cat, "string")

l = ["COLUMN1","COLUMN2"]

df = df.withColumn("NEW_COLUMN", udf_cat(l))

但是我總是會出錯。

過了一會兒,我發現我所需要的只是在列表前使用字符“ *”傳遞。 例:

df = df.withColumn("NEW_COLUMN", udf_cat(*l))

這樣,它將起作用。

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM