堆栈内存溢出
cost 77 ms
使用 Hive QL 解压 gzip 列数据

[英]Decompress gzip column data using Hive QL

我在 Hive 中有一个表（ accounting_info ），其中一个列（ info ）数据采用 gzip（二进制）压缩格式。 有没有办法从仅使用 Hive QL 的列中以字符串格式提取解压缩数据。 我只能找到一种方法来获取解码的二进制数据： select base64(a.info) from ...

将文本数据加载到表中时，Hive 未正确处理 integer 值

[英]Hive is not handling integer values properly when loading text data into table

我正在将一些文本数据加载到包含int列的Apache Hive中。 它在意想不到的地方存储了 null 值。 所以，我进行了一些测试： testdata.csv 包含以下数据： 如您所见，数据集在数字周围包含一些额外的空格。 但这会导致hive将 null 值存储在 integer 列中，而浮点数 ...

HiveSQL 中 WHERE 语句中的条件

[英]Condition in WHERE statement in HiveSQL

这可能是微不足道的，但我有一个简单的查询，其中包含 WHERE 语句中的条件。 问题是，如果基于在查询之外声明的 Hive 变量，另一个条件为真，我希望存在一个条件。 例如： 如果条件 3 类似于：${hiveconf:variable}<5: 则包括条件 4，即“并且属性不为空”。 这个 h ...

Hive 桶数增加 - 现有数据拆分如何发生在新桶上？

[英]Hive Increase in bucket count- how the existing data split occurs to new buckets?

在 hive 中，我有带有 10 个存储桶的 Orc 文件格式的表，并且该表已经有 1Tb 的数据。如果我增加存储桶计数，我现有的数据会在新存储桶之间自动拆分，还是我需要重新加载表中的数据。 有什么办法可以改变桶数吗？ 我是桶概念的新手。有人可以帮助回答这个问题吗？ ...

日期转换导致配置单元中的 NULL

[英]Date conversion resulting in NULL in hive

当我进行插入时，从基础表中获取数据时，生日字段返回 NULL。 INSERT 语句 (XYZ) 中的基础表以数字格式获得生日，例如“20030131”。 我试图将其转换为字符串和应用日期函数，但这不起作用。 我怎样才能让我的生日字段保持正确的形状？ 我认为这方面的任何技术建议都非常宝贵。 ...

使用相似表优化 Hive 查询

[英]Optimize Hive query with similar tables

我有两个非常相似的大表，由 6 个左连接组成。 它们之间的唯一区别在于其他表连接到的第一个表，否则主选择子句和其余表相同。 一个简单的例子是： 我希望这很清楚。 唯一的区别是表 'a' 的 where 条件，其他所有内容都连接到该条件。 我怎样才能优化它，这样我就不必编写两个几乎相同的查询？ ...

将日期时间字符串从特定时区转换为另一个特定时区

[英]Convert datetime string from specific time zone to another specific timezone

我有一个来自不同位置的订单的 HIVE 表。 此表包含一个字符串列，其中包含每个订单的日期和时间。 还有另一列具有相应的时区。但是，由于某种原因，时区列中的值不是本地的。 然后对于每个日期，我都有相应的时区和要转换的目标时区。 像这样： with orders as ( select 1 a ...

2022-07-20 14:50:17   1   18    hive / hiveql  
使用行号函数进行分组

[英]Grouping using row number function

我一直在使用row_number()函数来只选择我需要的观察结果。 在我的场景中，每当一个特定的<id, entity_id, period, element>有两个不同的名称时，国家名称应该被排除在外。 如果只有一个，就拿唯一一个。 对于上述情况，以下方法可以解决问题： 问题是 ...

如何通过 Nifi 或 sqoop 使 RDBMS 与 Hive 保持同步，以更新相同记录而不是创建新记录

[英]How to keep RDBMS in sync with Hive through Nifi or sqoop in terms of updation of same record instead of creating a new one

要求：需要从 RDBMS (Sql-server) 中获取 1000 个表并将其推送到 Hive 中以近乎实时地运行分析和生成报告。 我正在使用 Nifi 从 RDBMS 表中读取数据并将 Hive 表作为外部表推送。 问题：假设我在 RDBMS 中有一个表 = Employee，有 10 条记录 ...

是否有 HiveQL 可以但 SQL 不能的限制？

[英]Are there restriction which HiveQL can but SQL can't?

我计划从 HiveQL 迁移到 SQL，但我不知道这两种语言之间的限制或注意点。 我知道从 SQL 到 HiveQL 有一些限制。 例如，1:SQL 可以通过一个“FROM”语句设置两个或多个表，但 HiveQL 不能。 2：SQL可以按不是“SELECT”的列排序，但HiveQL不能。 3： ...

2022-07-12 16:14:36   1   25    sql / hiveql  
我们如何在 Hive 执行期间更改作业的优先级？

[英]How can we change the priority of jobs during Hive execution?

我有 2 个工作要在 Hive 集群上完成。 第一个先来，需要很长时间，而第二个来得晚，但几乎立即需要。 由于第一个任务的数据量很大，预计这不会在一夜之间完成，那么有没有办法在不杀死第一个任务的情况下切换任务的优先级？ ...

如何对表进行分组并打印不是我们要分组的列的函数的列

[英]How to group a table and print a column which is not a function of column we are grouping on

我有一张桌子，让我们说如下： 这里 a1,a2,a3 不需要不同，对于 b 和 c 相同。 不仅有 3 行，还有数百万行，我无法从该表中选择 * 或创建临时表。 问题是按 A 列分组（因此我们希望该列的每个不同条目有 1 行），并打印大量聚合数据，但 C 列不是 A 列的函数。列中只有 3 个 ...

如何根据另一列提取配置单元中的所有记录

[英]how to pull all records in hive based on another column

如果这是我的表格如下所示： 我怎样才能得到这个输出？ 现在我有： SELECT my_id, my_words, my_people, my_number from table where my_people="Mary" AND lower(my_words) like 'now%'; ...

Presto SQL/Hive 子查询或连接？

[英]Presto SQL/Hive Sub query or join?

我正在处理一个查询，该查询需要我加入另一个 hive 表以使用用户 ID 号提取用户名。 是否可以仅为该用户名的结果编写子查询，还是应该加入？ 表 1：Assigned_Tasks 包含 task_number、owner_id、title、description、progress、ds 列表 2 ...

HADOOP 蜂巢查询 - SQL

[英]HADOOP HIVE QUERY - SQL

我在hive中写了一个查询。 它不起作用查询： 它显示group by 'country' is missing 。 ...


排序:
质量:
 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM