堆棧內存溢出
cost 323 ms
Cloud Bigtable 的亞毫秒級延遲

[英]Sub-millisecond latency for Cloud Bigtable

Cloud Bigtable 在什么條件下可以實現亞毫秒級延遲？ 我聽說亞毫秒級延遲是可能的，所以為了測試它，我創建了一個非常簡單的 Bigtable 實例，使用默認配置和一個僅包含單個單元格的表。 在與 BigTable（愛荷華州）相同的區域，我運行了一個簡單的測試：table = client ...

cloud big table 在設置十六進制值時添加額外的 /

[英]cloud big table adds an additional / when setting a hex value

我正在嘗試使用終端“cbt”在雲大表中設置一個值。 這些值是十六進制的，出於某種原因，它會在我提交時添加一個額外的 / 。 我想讓它看起來像 但它看起來像 我曾嘗試使用單引號' ，在/\x00之前添加斜杠，但兩者均無效。 如何使用 cbt 將'\x00\x00\x00\x00\x00\x00\x0 ...

如何從 Bigtable 中刪除記錄

[英]How to delete record from Bigtable

我在數據流中有數據管道； 並嘗試使用 rowkey 從 bigtable 中刪除記錄。 我嘗試了幾種使用方法； 前任 - 但是我無法成功刪除記錄，如果有人能夠使用數據流或使用 java 成功執行刪除，我能否獲得一些示例代碼。 ...

通過 Spark 在 Janusgraph 上進行 Gremlin 查詢。 錯誤：提供商 org.janusgraph.hadoop.serialize.JanusGraphKryoShimService 無法實例化

[英]Gremlin query on Janusgraph through Spark. Error: Provider org.janusgraph.hadoop.serialize.JanusGraphKryoShimService could not be instantiated

當前架構 描述我正在使用 JanusGraph 0.6.2 進行圖形處理。 GCP BigTable 作為 JanusGraph 后端/數據庫。 Spark 3.0.0 和 hadoop 2.7 用於數據處理，在本地設置（計划在 POC 之后在 GCP 中設置環境）。 Gremlin Clie ...

通過數據流將數據寫入雲 bigTable 時出錯

[英]getting error while writing data onto cloud bigTable through dataflow

我正在使用第二代雲 function 來觸發數據流作業。 Dataflow 模板基本上是從雲存儲中讀取 parquet 文件並將數據加載到 bigTable 中。 這是代碼和 package 詳細信息import os import datetime import logging from con ...

java.io.InvalidClassException：org.apache.tinkerpop.gremlin.hadoop.structure.HadoopConfiguration； 無法創建實例

[英]java.io.InvalidClassException: org.apache.tinkerpop.gremlin.hadoop.structure.HadoopConfiguration; unable to create instance

我是 Spark 的新手，我的 spark master 在 GCP Kube.netes Standard 集群上。 我正在使用 gremlin 客戶端觸發 spark 作業，在我的本地機器配置上它工作得很好並且作業完成了，但是在 Kube.netes 上，我看到以下錯誤。 Gremlin 查詢 ...

GCP - BigTable 到 BigQuery

[英]GCP - BigTable to BigQuery

我正在嘗試使用外部表配置在 BigQuery 中查詢 Bigtable 數據。 我正在使用以下 SQL 命令。 但是，我收到一條錯誤消息，指出invalid bigtable_options for format CLOUD_BIGTABLE. 當我刪除columns字段時，代碼有效。 對於上下文 ...

GCP Bigtable 客戶端與 Vert.X 屏蔽

[英]GCP Bigtable client with Vert.X blocking out

我正在使用 GCP 提供的 Vert.X 和 Bigtable 客戶端庫。 查詢數據的調用是從工作池/executeBlocking 發出的。 但是我收到的 AsyncResult 是 null，過了一會兒，警告日志被打印出來，因為工作線程被阻塞的時間太長了。 Gradle 依賴項： Bigta ...

遷移PostgreSQL表中的BigTable表

[英]Migrate BigTable table in PostgreSQL table

我想搬出 BigTable，因為它的成本很高。 我有一個 5GB 的表，想將它遷移到 PostgreSQL 數據庫。 到目前為止，我已經找到了在 BigTable 中遷移數據但沒有從中遷移數據的方法，而且我不想使用 CloudSQL，因為這比繼續使用 BigTable 的成本更高。 另一個想法是將表 ...

批量刪除 BigTable 表和 BigQuery 數據集

[英]Batch delete BigTable tables and BigQuery datasets

我四處尋找一種方法來批量刪除 BigTable 表和 BigQuery 數據集（使用 python 的庫），到目前為止沒有任何運氣。 有人知道這樣做的有效方法嗎？ 我查看了這些鏈接，但沒有任何希望： 大查詢 大表我正在從數據存儲文檔中尋找與此類似的內容： 批量刪除 ...

如何為谷歌數據流作業設置暫存、預生產？

[英]How to setup staging, pre-prod for google dataflow jobs?

假設我們有一個數據流作業： 用 Apache Beam Java SDK 編寫，這是一個 Gradle 項目。 使用 pubsub 流作為輸入，將結果寫入 bigtable 並將日志寫入 BigQuery。 與部署服務器一樣，我們可以輕松地擁有一個登台、預生產和生產環境。 我想知道在 ...

何時使用 BigTableIO.write() API 與 CloudBigtableIO.CloudBigtableSingleTableBufferedWriteFn API

[英]when to use BigTableIO.write() API vs CloudBigtableIO.CloudBigtableSingleTableBufferedWriteFn API

我看到有兩個 API 可用於寫入 GCP BigTable ： BigTableIO.write()與CloudBigtableIO.CloudBigtableSingleTableBufferedWriteFn 。 我正在研究數據流管道，以從一個 BigTable 讀取數據並將處理后的輸出存儲在另 ...

是否可以刪除具有給定前綴的所有行而不單獨刪除每一行？

[英]Is it possible to remove all rows with a given prefix without deleting each one individually?

我在 Bigtable 表中有一些我們“軟刪除”的記錄，即我們在 rowkey 前加上deleted# 。 我們現在需要擺脫所有這些，有沒有一種簡單的方法可以做到這一點而無需編寫腳本來找到它們並一個一個地刪除它們？ 我希望我可以使用cbt deleteallrows但我不想刪除表中的所有行，只刪除 ...

谷歌大表過濾器 Java

[英]Google Big table Filter with Java

我想過濾與此條件匹配的所有行：使用輸入值x ，返回 Java 中兩個量詞值之間的所有記錄。 示例：輸入值x = 15 ， 量詞q1 = 10和q2 = 20的記錄將匹配，量詞q1 = 1和q2 = 10的記錄將不匹配 ...

谷歌 Bigtable 二級索引

[英]Google Bigtable secondary indices

在查看 Google Bigtable 時，我發現它不提供定義二級索引的能力。 因此，如果您有 10 億筆交易，針對 1000 萬客戶，您似乎需要進行全表掃描來提取一個客戶的所有交易。 由於 Google Bigtable 似乎在后台使用 Apache HBase，我的第一個想法是：大概可以將 Ap ...

用戶活動數據流的接收器以構建在線 ML 模型

[英]Sink for user activity data stream to build Online ML model

我正在編寫一個從 Google Pub/Sub 消費(user activity data, (activityid, userid, timestamp, cta, duration)的消費者，我想為此創建一個接收器，以便我可以在線訓練我的 ML 模型。 由於這個接收器是我將獲取用戶最后一個 x ...

無法從 C# 客戶端連接到 Bigtable Emulator

[英]Cannot connect to Bigtable Emulator from C# client

我在本地機器上運行Google Bigtable Emulator並在端口 8086 上偵聽。 使用C# Google.Cloud.Bigtable.Admin.V2 庫我想像這樣連接到模擬器： 盡管按照模擬器文檔中的描述設置了環境變量，但該庫似乎仍然需要（雲）憑據。 我收到以下錯誤： ...


排序:
質量:
 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM