在 BigQuery 中结合历史数据源和近乎实时的数据源？

Question

我正在尝试使用 BigQuery 的免费层来教育自己，对于我的第一个挑战，我想为股票价格创建一个趋势跟踪系统。 为此，我将有历史股票市场价格的表格，涵盖了我 99% 的需求，但最后 1% 最重要，因为该部分将代表实时或接近实时的数据。 目标是结合这两个来源，以便价格趋势包括最近的数据并基于此创建信号。 但...

尽管可以通过定期加载来覆盖历史数据部分，例如 csv 文件，但近实时数据无法流式传输，因为这在免费层中是不允许的。 除此之外，我总是只需要一行来公平地代表当天每只基金的猜测收盘价。 然后我可以每隔一小时左右运行一次。

所以我的新手问题是如何给这只猫剥皮？ 我假设我不能只从查询中调用 API 以包含最新数据并将其与现有表相关联。 但是我会定期创建，比如说，10.csv 文件，所有文件都只有一行包含最新的价格数据，将它们上传到表中，然后查询结果吗？ 这看起来不是一种非常优雅的方式，但它可能是唯一的方式......

任何建议将不胜感激！

Answer 1

只需要单行作为当天每只基金的猜测收盘价的公平表示

如果实时数据是单行，则将这些数据包含在查询本身中是非常合理的，例如作为查询参数，甚至作为查询的文字部分（使用适当的 escaping 以避免错误和 sql 注入）。