如何使用 plotly 为 dask 数据框绘制交互式图

Question

我有一个有 30 个分区的 Dask 数据框，（每个分区）有 1 亿个原始数据。 整个 dask 数据帧中的原始数据总数为 4 亿原始数据。 我想使用 plotly 将所有 Daskframe 绘制在一个图中。 我将如何实现这一目标？ 最终结果是数据的整体图，如果我想探索数据的特定区域，我可以放大和平移。 我的数据大小约为 3.5 GB，它们不会存储在内存中。

Answer 1

3.5GB是一个相当小的大小，所以应该适合内存。 如果没有，有一些策略：

1. 通过仅选择感兴趣的列、加载到内存并使用标准库绘制数据来减少数据：

from dask.dataframe import read_parquet

df = read_parquet(path_to_file, columns=specific_cols).compute()

2. 数据着色器 - https://plotly.com/python/datashader/