[英]PySpark unable to access column which was added using StringIndexer
[英]How to place column name as variable when using Stringindexer in Pyspark
{simpleDF.columns
#output :['color', 'lab', 'value1', 'value2']
indexer = simpleDF.select('lab')
from pyspark.ml.feature import StringIndexer
# Let us create an object of the class StringIndexer
lblindexer=StringIndexer().setInputCol(indexer).setOutputCol("LabelIndexed")
idxRes=lblindexer.fit(simpleDF).transform(simpleDF)
idxRes.show(5)}
这行代码运行良好,但我希望它更通用
#lblindexer=StringIndexer().setInputCol('lab').setOutputCol("LabelIndexed")
收到错误:TypeError:为参数“inputCol”提供的参数值无效。 无法将 <class 'pyspark.sql.dataframe.DataFrame'> 转换为字符串类型
使用输入 col 的列名,而不是 dataframe:
lblindexer=StringIndexer().setInputCol('lab').setOutputCol("LabelIndexed")
如果要使用变量,
indexer = 'lab'
lblindexer=StringIndexer().setInputCol(indexer).setOutputCol("LabelIndexed")
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.