绘制大数据时间序列（客户端-服务器）

Question

我已经对如何 plot 巨大的时间序列（多个 GB）进行了相当多的研究。

我有一个客户端-服务器架构，其中后端是一个 python-fastapi 服务器，其中 csv 文件和存储。 此数据以 JSON 格式发送给客户端，并使用 plotly.js 绘制。

我想要存档的是有一个反应式 plot ，我可以在其中无延迟地缩放并且不会丢失数据，因为它用于检测异常。

很明显，将每个点都发送到前端是没有意义的，因为我们无法在给定的分辨率上显示数百万个点。 所以我有多个问题，关于如何提高速度：

• 我需要提高读取多个 GB 时间序列的速度。 这个用例有什么好的数据结构吗？
• 减少发送到前端的数据量（我们显然不想发送多 GB 的数据）

我现在想到的是始终为相应的屏幕分辨率显示数据的下采样版本，然后允许放大并加载数据的新部分（再次在下采样版本中）

如果有人对如何创建这样的系统或我可以在哪里找到解决这个问题的资源有一些想法，那就太好了。 这可能包括对数据进行下采样的策略，关于如何更快地读取数据或任何完成这些任务的框架：）