如何在pyspark中创建数据集
[英]How to create dataset in pyspark
问题描述
I would like to use dataset in pyspark. I read pyspark doesnt support dataset and only Java / Scala support dataset.
我想在 pyspark 中使用数据集。我读到 pyspark 不支持数据集，只有 Java / Scala 支持数据集。
Is there any way I can use Dataset in pyspark?有什么办法可以使用 pyspark 中的数据集吗？
1 个解决方案
解决方案1
0 2023-01-10 06:04:33
If you thinking about Typed Spark Datasets, then no, you can't use them in python.如果您考虑类型化 Spark 数据集，那么不，您不能在 python 中使用它们。
Check this answer .检查这个答案。
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
相关问题
Pyspark：如何选择数据集的子集并保存？ - Pyspark: how to select a subset of a dataset and save it?
复杂和嵌套的 json 数据集如何与 pyspark 一起使用 - How complex and nested json dataset works with pyspark
如何在 python/pyspark 中读取.wpd sas 数据集 - How to read .wpd sas dataset in python/pyspark
PySpark：如何在PySpark SQL中创建计算列？ - PySpark: How to create a calculated column in PySpark SQL?
如何创建多类数据集？ - How to create a multiclass dataset?
如何创建数据集的h5py数据集 - How to create h5py dataset of a dataset
如何在PySpark中创建kafka流？ - How to create a kafka stream in PySpark?
如何在 pyspark 中新建列 - How to create a new column in pyspark
"如何在 pyspark 中创建数据框的副本？" - How to create a copy of a dataframe in pyspark?
如何在 PySpark 中创建自定义 Estimator - How to create a custom Estimator in PySpark
相关标签