繁体   English   中英

如何将列表传递给pyspark中的UserDefinedFunction(UDF)

[英]How to pass list to UserDefinedFunction (UDF) in pyspark

我需要传递一个列表作为pyspark中某个UDF的参数。 例:

def cat(mine,mine2):
     if mine is not None and mine2 is not None:
             return "2_"+mine+"_"+mine2

udf_cat = UserDefinedFunction(cat, "string")

l = ["COLUMN1","COLUMN2"]

df = df.withColumn("NEW_COLUMN", udf_cat(l))

但是我总是会出错。

过了一会儿,我发现我所需要的只是在列表前使用字符“ *”传递。 例:

df = df.withColumn("NEW_COLUMN", udf_cat(*l))

这样,它将起作用。

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM