找不到區域服務器的 Hbase 區域負載統計信息

[英]Hbase Region Load Stats not Found for Region Server

在將數據寫入 Hbase 時，我在客戶端看到以下日志： AsyncRequestFutureImpl [錯誤] 沒有找到 server=regionserver-1,16020,1662657306210, region=table1,,1662657579710.841db4e690a77a76 ...

將數據從 HBase 遷移到 Cassandra 以用於 Janusgraph 后端存儲的最佳方法是什么？

[英]what is the best way to migrate data from HBase to Cassandra for Janusgraph backend storage?

我使用 HBase 作為 Janusgraph 的后端。 我必須遷移到 Cassandra 作為后端。 遷移舊數據的最佳方式是什么？ go 的一種方法是從 Hbase 讀取數據並使用 java 代碼放入 Cassandra。 ...

Gremlin - 優化查詢

[英]Gremlin - optimize query

我有一個圖表，表示數據庫對象、父子關系和數據流關系（僅在列之間）。 這是我當前的 gremlin 查詢（在 python 中），它應該找到列的數據流影響： 此查詢應返回所有邊緣，這些邊緣以某種方式受到初始列的影響。 問題是，在某些情況下，我不關心列級別的東西，我想獲得“架構級別”的優勢。 這就是 l ...

當 HBase 在 docker 等容器中運行時如何維護 HBase 的局部性

[英]How to maintain locality of HBase when it runs in a container like docker

我正在嘗試使用 k8s 部署 HBase 集群。 我有一些運行 k8s 和 hdfs 的裸機。 我知道如果我直接在這些機器上部署 HBase，本地就可以了。 但是如果這些服務運行在容器中呢？ 就像這樣：在這里輸入圖像描述我個人認為盡管 RegionServer 在同一節點中運行，但位置將為零，因為 ...

如何在不掃描整個表的情況下使用 spark 連接到 HBase 表並獲取特定的已知行鍵數據

[英]How to connect to HBase table using spark without scanning entire table and get specific known row keys data

我有大量的行鍵，需要在不掃描整個表或將整個表加載到 spark 的情況下獲取這些行鍵的數據，因為表非常大 ...

Phoenix/HBASE 表導入后索引數據錯誤（快照）

[英]Wrong index data after importing Phoenix/HBASE table (by snapshot )

我需要將 Phoenix/HBase 表從一個非常舊的集群遷移到新集群。 原始集群版本 HDP-2.5.3.0 HBASE 1.1.2 (HDP-2.5.3.0-37) 鳳凰 4.7.0 (HDP-2.5.3.0-37) Ubuntu 12.04 目標集群版本 BigTop(3.1.1) 或 ...

使用 Knox 通過 Thrift 訪問 Hbase

[英]Access to Hbase over Thrift with Knox

Hbase 有幾個包裝器服務可以幫助訪問它。 它們是 Thrift 和 Rest 服務。 我們正在使用 Apache Knox 訪問這些服務。 我們可以使用Knox WEBHBASE服務通過Rest訪問Hbase。 問題是：如何使用 Knox 通過 Thrift 服務訪問 Hbase？ 這在一般 ...

Hbase：讀取壓縮數據是如何工作的？

[英]Hbase: How does reading of compressed data work?

我知道如果我們為列族啟用壓縮，那么保存的 hfiles 的值將使用我們指定的算法進行壓縮，並且壓縮發生在塊級別。 但是當讀出數據塊時，這個解壓是如何工作的。 例如。 如果我們使用 snappy，讀取是如何發生的。 它如何弄清楚如何從壓縮數據中讀取特定的鍵值？ 這是如何實時完成的。 ...

Hbase rest API 在表中添加新數據不起作用

[英]Hbase rest API of adding new data in table dont work

Truying 將一些數據放入表中（表已經存在）這里是代碼（C#）： 這是我得到的： 我已經通過谷歌搜索並看到了很多 github 存儲庫，但沒有找到答案。 創建表並刪除它的請求工作正常。 有任何想法嗎？ 我的要求正確嗎？ 謝謝。 ...

無法在 hbase shell 中創建表：org.apache.hadoop.hbase.PleaseHoldException：Master 正在初始化

[英]Cannot create table in hbase shell : org.apache.hadoop.hbase.PleaseHoldException: Master is initializing

我正在嘗試使用命令在 hbase shell 中創建一個表 hbaseshell> 創建“人”，“信息” 該命令未成功執行並拋出如下錯誤： 我在網上搜索並找到了一些答案。 但答案不是很清楚。 它只是聲明清除-擦除 Zookeeper 數據目錄-。 但是數據目錄在哪里？ 以及如何訪問它。 有人可 ...

Hbase 怎么不使用 RAFT 或 Paxos 之類的共識算法？

[英]How doesn't Hbase use any consensus algorithm like RAFT or Paxos?

我知道 HBase 中的復制是通過僅通過 append 日志文件完成的，以保持與 master 中相同的條目順序以復制到從屬的 WAL 我假設必須有一些共識協議。 它是如何設計的，所以沒有任何共識協議？ By ordering for example, update a boolean colum ...

Java 程序從 HDFS 加載多個 csv 文件，讀取列值並加載到 HBASE？

[英]Java Program to load the multiple csv files from HDFS, read column values and load into HBASE?

我是大數據和 hadoop 的新手。 我有一個要求，我必須上傳 100 個 csv 文件，其中包含信息（例如人員信息，即姓名、年齡、城市）到 hdfs 然后使用 java 程序從 HDFS 加載 csv 文件，讀取列值並加載到 HBASE。 你能幫我么？ 解析文件很好。 但我不明白如何使用 jav ...

使用 Lucene 作為索引后端和 HBase 或 Cassandra 作為存儲后端配置 JanusGraph

[英]Configuring JanusGraph with Lucene as index backend and HBase or Cassandra as storage backend

如何使用 Lucene 作為索引后端和 Cassandra/HBase 作為存儲后端來配置 Janusgraph？ 運行此命令時./bin/janusgraph-server.sh console./conf/gremlin-server/gremlin-server-[...].yaml 只有當 ...

有沒有辦法在靜態塊中實現條件語句

[英]Is there a way to Implement conditional statements in Static Block

我有一個類HDFSHbaseInstance它將在static block中加載Hbase配置 現在由於某些原因，我必須再創建一個類HDFSInstance來加載Hadoop默認配置 問題就在這里，我有一個班級會根據某些條件決定使用班級以上的任何人。 我只是通過conditional sta ...

是否可以使用 monit 工具監控 hadoop、hbase 和 yarn？

[英]Is it possible to monitor hadoop, hbase and yarn using monit tool?

我想監控一些服務，當這些服務出現故障時需要重新啟動，我發現了一個很棒的工具monit 。 它適用於Zookeeper ，因為我得到了一個matching "QuorumPeerMain"的條件，如下所示的monitrc文件 同樣，我想監控這些： hadoop、yarn 和 hbase 的地方 ...

使用 Java 連接到 EMR HBase

[英]Connecting to EMR HBase using Java

我正在嘗試從在 EMR 5.35（Hadoop 2.10、Spark 2.4.8、HBase 1.4.13）上運行的 Spark 程序內部連接到 HBase 當不嘗試連接到 HBase 時，我的 Spark 程序運行良好。 但是，當我添加 HBase 代碼時，Spark 程序會在創建配置時終止： ...

我可以配置多個 HBase 的 HMaster 嗎？

[英]Can i config many HMaster of HBase?

我知道 HBase 與 ZooKeeper 一起運行，它有 2 個 HMaster 處於活動狀態和非活動狀態，那么我可以配置多個 HMaster 嗎？ 就像Hadoop有很多namenode一樣，HBase可以有很多HMaster嗎？ 謝謝 ...

谷歌 Bigtable 二級索引

[英]Google Bigtable secondary indices

在查看 Google Bigtable 時，我發現它不提供定義二級索引的能力。 因此，如果您有 10 億筆交易，針對 1000 萬客戶，您似乎需要進行全表掃描來提取一個客戶的所有交易。 由於 Google Bigtable 似乎在后台使用 Apache HBase，我的第一個想法是：大概可以將 Ap ...

hbase 使用谷歌雲存儲（桶）

[英]hbase using google cloud storage (bucket)

我是 hbase 的新手。 新探索幾個選項。 我可以在谷歌雲上使用 gcs 文件系統作為 hbase 的后備存儲嗎？ 我知道有一個 google 的大表，假設使用 gcs 作為文件系統設置我們自己的集群會降低成本。 同意？ ...

數據庫 | Hbase col 限定符使用 Hbase shell cmds 隱藏，但通過 hbaserdd 火花代碼可見

[英]Hbase | Hbase col qualifier hidden using Hbase shell cmds but visible via hbaserdd spark code

我會說，我陷入了與 Hbase 設計相關的非常奇怪的情況。 所以，問題陳述是，在 Hbase 中，我們的表中有一行。 當我們從下游接收數據時，我們執行新的插入，然后對同一 Hbase 行進行后續更新。 並說最后一行在我們的 Hbase 表中是這樣的 因此，當通過 scan 或 get 命令獲取時，上 ...