Dask 数据框的值
[英]Values of a Dask Dataframe
问题描述
有没有办法在不使用计算函数作为熊猫的情况下获取 dask 数据帧的值？
- 熊猫：
df.values - Dask 使用计算函数：
ddf.compute().values
Dask 使用计算功能很慢，我必须将 dask 数据帧转换为 json 格式，为此我应该获取值。
2 个解决方案
解决方案1
1 2020-02-07 09:59:17
由于 Dask 适用于大型数据集，因此对完整数据源执行计算没有意义。
我认为你应该通过迭代分区来生成你的 json 文件。
df.npartitions为您提供分区数。
你可以得到一个特定的分区（例如，n）与df.get_partition(n)
解决方案2
0 已采纳 2020-02-15 22:36:20
我必须将 dask 数据框转换为 json 格式和
您可能对 Dask 数据帧的.to_json方法感兴趣
要做到这一点，我应该得到这些值。
这可能不是真的
Dask - 是否有相当于 pandas df.values.tolist() 的 dask dataframe？
[英]Dask - Is there a dask dataframe equivalent of pandas df.values.tolist()?
dask DataFrame 相当于 pandas DataFrame sort_values
[英]dask DataFrame equivalent of pandas DataFrame sort_values
dask.compute Dask DataFrame 类型的所有值作为值存储在字典中
[英]dask.compute all values of Dask DataFrame type that are stored as values in a dictionary
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
相关问题
数据框计数值
NaN 值未替换为 dask dataframe
Dask - 是否有相当于 pandas df.values.tolist() 的 dask dataframe？
计算dask.dataframe中某些值的出现次数
每个 Dask Dataframe 列中唯一值的数量
Dask-Dataframe 列中唯一值的数量
创建一个空的dask数据框并为其附加值
将值应用于 Dask dataframe 映射与 function
dask DataFrame 相当于 pandas DataFrame sort_values
dask.compute Dask DataFrame 类型的所有值作为值存储在字典中
相关标签