无法连接 HBase

[英]Not able to connect HBase

在Cloudera-quickstart-VM上运行的 Hbase 还验证了Zookeeper和Hbase使用hbase shell Hbase运行，但是当我尝试使用 java 程序创建表时，我遇到了错误。 找到 Cloudera Virtual Box 配置 找到 window 主机文件配置： ...

HBaseWriteStreamExample，但 Flink 文档中没有 HBaseReadStreamExample

[英]HBaseWriteStreamExample, but no HBaseReadStreamExample in Flink docs

为什么Flink-HBase 连接器中没有 HBaseReadStreamExample ？ 似乎有一个 Read、Write 和 WriteStream 示例，但没有 ReadStream。 stream 从 HBase 读取到 Flink 是一种不好的做法吗？ ...

从 pyspark 读取 hbase

[英]read hbase from pyspark

我正在尝试使用 pyspark 从 hbase 读取数据。 hbase 版本：HBase 1.2.0-cdh5.16.2 pyspark版本：2.3.0.cloudera4版本我想我需要使用这个 jar hbase-spark-1.2.0-cdh5.16.2.jar 我下载了它并运行代码：fr ...

我们如何使用 completebulkload 为将数据加载到 HBase 表中的单元格设置 TTL

[英]How do we set TTL for cell in Load Data to HBase Table using completebulkload

我有一个用例，我需要使用批量导入数据到 HBase。 我正在关注来自官方网站的此链接-> http://hbase.apache.org/book.html#completebulkload ，一切正常，但设置 TTL 选项不是很清楚以前有人用过吗？ Mapreduce 工具 hbase ...

具有设置字段的记录的 Bigtable 行键设计

[英]Bigtable row key design for records with a set field

我需要提高从 Bigtable 获取数据的服务的性能，并且考虑到所涉及的访问模式和数据，我认为行键设计主要是问题所在。 我还需要不同服务的性能来推动数据保持一致（或改进）。 这是一个例子（请耐心等待）。 我每天收到成批发送的数百万条记录。 假设它是每天更新的全球宠物主人信息，每条记录的格式如下： 名 ...

HBase oldWALs, pv2-(sequence number).log 未清理

[英]HBase oldWALs, pv2-(sequence number).log are not cleaned up

我想知道是否有人对以下问题有任何想法。 hdfs 上的 oldWALs 目录似乎只被部分清理，（非常小的）pv2-（序列号）.log 文件只是不断增加（每小时左右添加一个文件） 什么主进程应该清理这些特定文件？ 那些 pv2 日志文件的目的是什么？ 因为我也看到一对 0bytes。 设置：hbas ...

将 python int 存储为 Hbase 的 byte[] 数组

[英]Storing python int as byte[] array for Hbase

我有一个像 215666 这样的 Python int，我需要将它存储在 hbase 的字节数组中。 215666 的十六进制值是 34A72 我应该有以下 我尝试了以下方法： 这给了我不是十六进制的字符： 此方法似乎适用于较小的数字，但随后开始打印奇怪的非十六进制值。 我很确定 hbase 需要 ...

HBase：有没有办法在从 hbase 硬删除行时停止创建墓碑标记？

[英]HBase: Is there any way to stop creation of tombstone markers while hard-deleting rows from hbase?

有没有办法在从 hbase 硬删除行时停止创建墓碑标记？ 我们需要批量删除数百万行。 目前我们遵循以下步骤顺序： 从 hbase 表中硬删除数据（使用 org.apache.hadoop.hbase.client.Delete API） 在受影响的表上运行主要压缩。 将新数据加载到表中。 由于我们 ...

Apache Phoenix Upsert 插入表 Select * 从视图

[英]Apache Phoenix Upsert Into Table Select * from View

我从 HBase 表创建了 Phoenix 视图，然后从中创建了 Phoenix 视图，最后尝试将其插入新的： 然后我创建一个 Phoenix 表： 然后我尝试Upsert： 可能是什么问题呢？ 是否可以从视图中插入表 select *？ 谢谢！ ...

GeoMesa HBase 查询的奇怪行为

[英]Weird Behavior of GeoMesa HBase Query

我有一个关于 HBase 查询的问题。 我看到很多数据被扫描以进行小型空间查询。 我在 OSMNodes 表上触发了地理空间查询。 下面是查询和表的详细信息。 我看到 HBase 上的读取请求总数 (5,553,421,708) 并看到大多数区域和区域服务器上的请求。 我们为什么要为这个查询扫描每个 ...

哪种 ETL 最适合 Hbase

[英]Which ETL is best for Hbase

我正在使用 Talend 开放工具从 HBase 中提取数据。 有没有其他最好的（准确地说：提取更多记录）开源工具，用于从 HBase 中提取数据并加载到另一个数据库中。 ...

尝试确认我对 HBase 和 MapReduce 行为的理解

[英]Try to confirm my understanding of HBase and MapReduce behavior

我正在尝试对我的 HBase 数据集进行一些处理。 但我对 HBase 和 Hadoop 生态系统还很陌生。 我想从这个社区得到一些反馈，看看我对 HBase 的理解和对它的 MapReduce 操作是否正确。 这里的一些背景： 我们有一个大约 1TB 的 HBase 表，记录超过 1 亿条。2。 ...

Hbase 表没有得到保存。 关闭后 Hbase 表消失

[英]Hbase tables are not getting saved. Hbase tables getting disappeared after shutdown

我已经安装了 hbase 独立应用程序，并且在运行 hbase shell 时遇到了很多麻烦。 然后我摆脱了这些问题并让它运行起来。 现在它工作正常。 现在我创建或列出或描述一个表都工作正常。 该表没有得到保存。 当我关闭我的系统时，表格正在消失。 我必须重新开始。 我是 hbase 的新手。 我需 ...

Hbase shell 可以从远程客户端访问，还是只能通过 SSH 连接访问？

[英]Can Hbase shell be accessed from remote client, or only by SSH connection?

我已经建立了一个独立的HBase服务器，只是为了练习和学习。 假设，Hbase 服务器的 IP 地址（我可以从控制台运行 Hbase shell）是 xxxx 在机器 xxxx 上，我还安装了 SSH 服务器。 我想知道，我是否可以使用来自另一台机器（yyyy）的一些特殊命令连接到 HBase 服 ...

Docker 容器未连接到远程 HBase

[英]Docker container not connecting to remote HBase

我创建了一个 python 应用程序的 docker 容器，其中的代码尝试连接到托管在 Cloudera 上的远程 HBase 集群。 Docker 运行良好，除了它不在远程 HBase 上进行读/写操作。 这是我的 docker-compose.yml 文件的一部分 欢迎提出建议。 ...

“数据源不是 org.apache.phoenix 的成员”尝试使用 DataSourceV2 将 DataFrames 保存到 Phoenix

[英]“datasource not a member of org.apache.phoenix” when trying to Save DataFrames to Phoenix using DataSourceV2

我正在尝试使用 DataSourceV2 将 DataFrames 保存到 Phoenix，遵循以下提到的来源： Apache Spark 插件我创建了一个 dataframe ，我想通过以下方式将它保存到凤凰： 但是import org.apache.phoenix.spark.datasou ...

错误：无法找到或加载主 class org.apache.phoenix.queryserver.server.QueryServer 与 Apache Phoenix Queryserver 启动

[英]Error: Could not find or load main class org.apache.phoenix.queryserver.server.QueryServer with Apache Phoenix Queryserver starting

我有一个 apache Hadoop 2.10.0 ， hbase 1.5和Phoenix 4.14的设置。 一切运作良好。 但是，当我尝试将 python 与 Phoenix 连接时，我需要启用queryserver 。 每当我尝试开始时，我都会收到以下错误并退出。 有人可以帮忙吗？ ...

Spring HbaseTemplate 保持连接活跃

[英]Spring HbaseTemplate keeping connection alive

我设法使用HbaseTemplate将Spring Hbase程序中： 但是，每次运行findAll()时都会打开与 Hbase 的连接（并在之后关闭）。 我在某处读到保持连接活动的方法是使用Connection和Table来调用 Hbase。 问题是HbaseTemplate使用HConnecti ...

无法将数据集从 SPARK 传输到 HBase 表

[英]Cant transfer dataset from SPARK to HBase table

我在将数据从 dataframe 中的 spark 传输到我创建的 HBase 表时遇到问题。 问题似乎是根据在线示例，此方法只能处理多个数据集，但我有一个 dataframe，里面有信息。 请帮忙！ //HBase表 ...

如何使用 Hortonworks-spark shc 将 Dataframe 值存储为行键和列？

[英]How to store Dataframe value as rowkey as well as column using Hortonworks-spark shc?

我正在使用 shc-core 将 spark 数据集写入 hbase，有关更多详细信息，请参见此处。 这是我当前的 shc 目录： 因为sof规则代码不能太长，所以只能给你一部分： 这是我的 HBase 目录： 其他字段output正常，但是rowkey列不是output。 我怎样才能将 row ...