[英]Convert the dictionary to data frame in pyspark for unicode key and list of float values
我有一个字典实例，该实例具有Unicode（使用UTF-8）键和值作为浮点值的列表。 当我运行以下代码时：
dictDF = sc.parallelize(mapOfVectors).toDF()
它失败并显示错误：无法推断类型的架构：将RDD转换为DataFrame时，键入“ unicode”。
有人可以建议如何做到吗？
尝试使用pandas.DataFrame.from_dict ：
import pandas as pd
dictDF = pandas.DataFrame.from_dict(sc.parallelize(mapOfVectors))
将标准 python 键值字典列表转换为 pyspark 数据框
[英]Convert a standard python key value dictionary list to pyspark data frame
如何按列对 pyspark 中的数据框进行分组，并获取以该列为键和记录列表为其值的字典？
[英]How to groupby a data frame in pyspark by a column and get a dictionary with that column as key and list of records as its value?
如何将数据帧的pyspark列中包含的Unicode列表转换为浮点列表？
[英]How do I convert convert a unicode list contained in pyspark column of a dataframe into float list?
如何对具有与单个键名相关的多个值的字典列表进行排序并将其转换为浮点数
[英]How to sort a dictionary list with multiple values related to one single key name and convert it to float numbers
如何将数据帧转换为字典，以1列为键，并针对每个键将第二列的值求和
[英]how to convert data frame to dictionary keeping 1 column as keys and summing the values of second column against each key
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.