![](/img/trans.png)
[英]GCP: What is the best option to setup a periodic Data pipeline from Spanner to Big Query
[英]What is the best way to read data from Spanner to PubSub Queue?
我需要像監聽器這樣的東西來監聽數據庫中的變化。 一旦發生一些變化,它就會在 pubSub 隊列中插入更新的行。 做這個的最好方式是什么?
它仍處於 alpha 階段,但你可以看看這個:https://github.com/cloudspannerecosystem/spanner-change-watcher
它是一個通用框架,用於通過輪詢表中的新提交時間戳來觀察 Spanner 數據庫的更改。 它確實需要您要監視更改的表包含一個帶有選項ALLOW_COMMIT_TIMESTAMP=TRUE
的列,並填充該列。
它包含三個主要模塊:
聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.