找不到区域服务器的 Hbase 区域负载统计信息

[英]Hbase Region Load Stats not Found for Region Server

在将数据写入 Hbase 时，我在客户端看到以下日志： AsyncRequestFutureImpl [错误] 没有找到 server=regionserver-1,16020,1662657306210, region=table1,,1662657579710.841db4e690a77a76 ...

将数据从 HBase 迁移到 Cassandra 以用于 Janusgraph 后端存储的最佳方法是什么？

[英]what is the best way to migrate data from HBase to Cassandra for Janusgraph backend storage?

我使用 HBase 作为 Janusgraph 的后端。 我必须迁移到 Cassandra 作为后端。 迁移旧数据的最佳方式是什么？ go 的一种方法是从 Hbase 读取数据并使用 java 代码放入 Cassandra。 ...

Gremlin - 优化查询

[英]Gremlin - optimize query

我有一个图表，表示数据库对象、父子关系和数据流关系（仅在列之间）。 这是我当前的 gremlin 查询（在 python 中），它应该找到列的数据流影响： 此查询应返回所有边缘，这些边缘以某种方式受到初始列的影响。 问题是，在某些情况下，我不关心列级别的东西，我想获得“架构级别”的优势。 这就是 l ...

当 HBase 在 docker 等容器中运行时如何维护 HBase 的局部性

[英]How to maintain locality of HBase when it runs in a container like docker

我正在尝试使用 k8s 部署 HBase 集群。 我有一些运行 k8s 和 hdfs 的裸机。 我知道如果我直接在这些机器上部署 HBase，本地就可以了。 但是如果这些服务运行在容器中呢？ 就像这样：在这里输入图像描述我个人认为尽管 RegionServer 在同一节点中运行，但位置将为零，因为 ...

如何在不扫描整个表的情况下使用 spark 连接到 HBase 表并获取特定的已知行键数据

[英]How to connect to HBase table using spark without scanning entire table and get specific known row keys data

我有大量的行键，需要在不扫描整个表或将整个表加载到 spark 的情况下获取这些行键的数据，因为表非常大 ...

Phoenix/HBASE 表导入后索引数据错误（快照）

[英]Wrong index data after importing Phoenix/HBASE table (by snapshot )

我需要将 Phoenix/HBase 表从一个非常旧的集群迁移到新集群。 原始集群版本 HDP-2.5.3.0 HBASE 1.1.2 (HDP-2.5.3.0-37) 凤凰 4.7.0 (HDP-2.5.3.0-37) Ubuntu 12.04 目标集群版本 BigTop(3.1.1) 或 ...

使用 Knox 通过 Thrift 访问 Hbase

[英]Access to Hbase over Thrift with Knox

Hbase 有几个包装器服务可以帮助访问它。 它们是 Thrift 和 Rest 服务。 我们正在使用 Apache Knox 访问这些服务。 我们可以使用Knox WEBHBASE服务通过Rest访问Hbase。 问题是：如何使用 Knox 通过 Thrift 服务访问 Hbase？ 这在一般 ...

Hbase：读取压缩数据是如何工作的？

[英]Hbase: How does reading of compressed data work?

我知道如果我们为列族启用压缩，那么保存的 hfiles 的值将使用我们指定的算法进行压缩，并且压缩发生在块级别。 但是当读出数据块时，这个解压是如何工作的。 例如。 如果我们使用 snappy，读取是如何发生的。 它如何弄清楚如何从压缩数据中读取特定的键值？ 这是如何实时完成的。 ...

Hbase rest API 在表中添加新数据不起作用

[英]Hbase rest API of adding new data in table dont work

Truying 将一些数据放入表中（表已经存在）这里是代码（C#）： 这是我得到的： 我已经通过谷歌搜索并看到了很多 github 存储库，但没有找到答案。 创建表并删除它的请求工作正常。 有任何想法吗？ 我的要求正确吗？ 谢谢。 ...

无法在 hbase shell 中创建表：org.apache.hadoop.hbase.PleaseHoldException：Master 正在初始化

[英]Cannot create table in hbase shell : org.apache.hadoop.hbase.PleaseHoldException: Master is initializing

我正在尝试使用命令在 hbase shell 中创建一个表 hbaseshell> 创建“人”，“信息” 该命令未成功执行并抛出如下错误： 我在网上搜索并找到了一些答案。 但答案不是很清楚。 它只是声明清除-擦除 Zookeeper 数据目录-。 但是数据目录在哪里？ 以及如何访问它。 有人可 ...

Hbase 怎么不使用 RAFT 或 Paxos 之类的共识算法？

[英]How doesn't Hbase use any consensus algorithm like RAFT or Paxos?

我知道 HBase 中的复制是通过仅通过 append 日志文件完成的，以保持与 master 中相同的条目顺序以复制到从属的 WAL 我假设必须有一些共识协议。 它是如何设计的，所以没有任何共识协议？ By ordering for example, update a boolean colum ...

Java 程序从 HDFS 加载多个 csv 文件，读取列值并加载到 HBASE？

[英]Java Program to load the multiple csv files from HDFS, read column values and load into HBASE?

我是大数据和 hadoop 的新手。 我有一个要求，我必须上传 100 个 csv 文件，其中包含信息（例如人员信息，即姓名、年龄、城市）到 hdfs 然后使用 java 程序从 HDFS 加载 csv 文件，读取列值并加载到 HBASE。 你能帮我么？ 解析文件很好。 但我不明白如何使用 jav ...

使用 Lucene 作为索引后端和 HBase 或 Cassandra 作为存储后端配置 JanusGraph

[英]Configuring JanusGraph with Lucene as index backend and HBase or Cassandra as storage backend

如何使用 Lucene 作为索引后端和 Cassandra/HBase 作为存储后端来配置 Janusgraph？ 运行此命令时./bin/janusgraph-server.sh console./conf/gremlin-server/gremlin-server-[...].yaml 只有当 ...

有没有办法在静态块中实现条件语句

[英]Is there a way to Implement conditional statements in Static Block

我有一个类HDFSHbaseInstance它将在static block中加载Hbase配置 现在由于某些原因，我必须再创建一个类HDFSInstance来加载Hadoop默认配置 问题就在这里，我有一个班级会根据某些条件决定使用班级以上的任何人。 我只是通过conditional sta ...

是否可以使用 monit 工具监控 hadoop、hbase 和 yarn？

[英]Is it possible to monitor hadoop, hbase and yarn using monit tool?

我想监控一些服务，当这些服务出现故障时需要重新启动，我发现了一个很棒的工具monit 。 它适用于Zookeeper ，因为我得到了一个matching "QuorumPeerMain"的条件，如下所示的monitrc文件 同样，我想监控这些： hadoop、yarn 和 hbase 的地方 ...

使用 Java 连接到 EMR HBase

[英]Connecting to EMR HBase using Java

我正在尝试从在 EMR 5.35（Hadoop 2.10、Spark 2.4.8、HBase 1.4.13）上运行的 Spark 程序内部连接到 HBase 当不尝试连接到 HBase 时，我的 Spark 程序运行良好。 但是，当我添加 HBase 代码时，Spark 程序会在创建配置时终止： ...

我可以配置多个 HBase 的 HMaster 吗？

[英]Can i config many HMaster of HBase?

我知道 HBase 与 ZooKeeper 一起运行，它有 2 个 HMaster 处于活动状态和非活动状态，那么我可以配置多个 HMaster 吗？ 就像Hadoop有很多namenode一样，HBase可以有很多HMaster吗？ 谢谢 ...

谷歌 Bigtable 二级索引

[英]Google Bigtable secondary indices

在查看 Google Bigtable 时，我发现它不提供定义二级索引的能力。 因此，如果您有 10 亿笔交易，针对 1000 万客户，您似乎需要进行全表扫描来提取一个客户的所有交易。 由于 Google Bigtable 似乎在后台使用 Apache HBase，我的第一个想法是：大概可以将 Ap ...

hbase 使用谷歌云存储（桶）

[英]hbase using google cloud storage (bucket)

我是 hbase 的新手。 新探索几个选项。 我可以在谷歌云上使用 gcs 文件系统作为 hbase 的后备存储吗？ 我知道有一个 google 的大表，假设使用 gcs 作为文件系统设置我们自己的集群会降低成本。 同意？ ...

数据库 | Hbase col 限定符使用 Hbase shell cmds 隐藏，但通过 hbaserdd 火花代码可见

[英]Hbase | Hbase col qualifier hidden using Hbase shell cmds but visible via hbaserdd spark code

我会说，我陷入了与 Hbase 设计相关的非常奇怪的情况。 所以，问题陈述是，在 Hbase 中，我们的表中有一行。 当我们从下游接收数据时，我们执行新的插入，然后对同一 Hbase 行进行后续更新。 并说最后一行在我们的 Hbase 表中是这样的 因此，当通过 scan 或 get 命令获取时，上 ...