堆栈内存溢出
cost 104 ms
如何将日期格式yyyyMMdd转换成Hive SQL并在where子句中自动查询

[英]How to convert date format yyyyMMdd in Hive SQL and automate the query inside the where clause

我想在自动化查询方面获得一些帮助。 目标是获取最新数据，数据每天都会刷新，但开始日期应保持不变。 例如：开始日期为 2023 年 1 月 1 日，但今天的结束日期应为 2023 年 1 月 13 日，第二天为 2023 年 1 月 14 日，但开始日期保持不变（2023 年 1 月 1 日）。 我已 ...

2023-01-13 22:49:39   1   43    sql / hiveql  
如何将数据插入 Hive 中的复杂数据类型“Struct”

[英]How do you insert data into complex data type "Struct" in Hive

我是 Hive 和 Stack Overflow 的新手。 我正在尝试创建一个具有复杂数据类型“STRUCT”的表，然后使用 Hive 中的INSERT INTO TABLE填充它。 我正在使用以下代码： 我收到以下错误： 编译语句时出错：失败：semanticException [错误 1004 ...

HIVE - 从字符串字段中省略完全括起来的 substring

[英]HIVE - Omitting exact bracketed substring from a string field

我有一个字符串字段，其中包含如下记录 “哈利·波特 (HP) (ab-cd)” “无名氏 (ab-cd)” “理查德·史密斯 (RS)” “威廉·约翰逊” 我想从所有记录中删除“(ab-cd)”部分，而不删除任何其他括号中的表达式。 结果应该是：“Harry Potter (HP)” “John ...

2023-01-13 13:21:32   1   20    hive / hiveql  
计算一天中非连续学生 ID 的唯一值

[英]Count Unique Values Throughout One Day For Nonconsecutive Student ID's

我想弄清楚如何在不计算重复实例的情况下计算学生在线的所有实例。 例如，在下面的屏幕截图中，我想看到一列仅计算学生登录的实例。因此，如果学生 A 在凌晨 5 点登录，则计数 = 1。学生 B 在 7 点登录，计数 = 2 . 在某个时候，学生 A 注销并在上午 8 点重新登录，计数应该是 2，而不是 ...

如何在 group by 之后按顺序连接一列？

[英]How to concat one column by order after group by?

数据集如下所示： ID 结果秩 001 经过 2个 002 失败 3个 001 失败 1个 002 经过 1个我想做的是：按 id 对数据集进行分组，然后按排名列的升序连接结果。 ID 结果 001 失败通过 002 过关失败由于涉及到其他列的顺序， concat_ws('-',collect ...

覆盖外部 hive 表

[英]overwriting external hive tables

hive中的外部表无法删除。 那我们怎么覆盖呢？ 当我们不能删除它们时，是否可以覆盖 hive 表？ ...

HiveQL 查询中 WHERE 子句中的过滤条件无法正常工作

[英]Filter condition in WHERE clause in HiveQL query does not work properly

当我通过直线运行以下查询时，WHERE 子句中的过滤条件之一 ( array_item in (20, 30) ) 似乎无法正常工作。 Hive 版本： 2.1.1with sample as ( select 1 as col, array(10) a ...

提取年初至今的数据并与去年同期进行比较

[英]Extracting year to date data and comparing with same time last year

我正在尝试提取截至当前日期与去年同期相比的交易数据。 请看代码： 我希望提取 2023-01-01 到当前日期的实例数据和 2022-01-01 到类似日期的数据，即 2023-01-01 -2023-01-05 和 2022-01-01 -2022- 01-05 无需手动输入日期范围，而是自动刷新 ...

如何在Hive中提取一个JSON的值

[英]How to extract a JSON value in Hive

我有一个 JSON 字符串，它存储在数据库中与父 ID 对应的单个单元格中 现在我想使用上面的 JSON 从中提取 id。 假设我们有这样的数据 我希望 output 看起来像这样 现在，我尝试了几次迭代来解决这个问题第一种方法： 但这返回的id列具有 NULL 个值。 我在这里缺少什么吗？ 第二种 ...

hive 从查询中排除值

[英]hive exclude values from query

我有一些数据看起来像 我想用 null state 获取不包括玛丽的结果。当我尝试 这只会给我所有连接了 state 的玛丽。 我在预期结果中寻找的是 ...

无法通过 Hive Beeline 命令对 ORC 表的行数进行 select 计数

[英]Unable to select count of rows of an ORC table through Hive Beeline command

我正在使用以下组件 - Hadoop 3.1.4、Hive 3.1.3 和 Tez 0.9.2 还有一个 ORC 表，我试图从中提取表中的行数。 select count(*) from ORC_TABLE并且这会引发以下异常集 还有另一篇文章描述了同样的问题， ORC Split Generat ...

在嵌套分区表的静态分区中添加动态分区？

[英]Add a dynamic partiton in in a static partition in a nested partition table?

我有一个包含嵌套分区的表，例如 - 国家1 运行日期 1 运行日期 2 国家2 运行日期 1 运行日期 2 我需要静态添加第一层（国家/地区）（因为它们位于不同位置）但希望动态添加第二层（运行日期）。 我在下面尝试过但它不起作用- ALTER TABLE <table_name> AD ...

将 Hive 引擎从 mr 设置为 Spark 后出现“失败：执行错误，返回代码 3”

[英]"FAILED: Execution Error, return code 3" after setting Hive engine from mr to Spark

我正在尝试在我的 Hive 查询中使用 Spark 引擎。 这是一个旧查询，我不想将整个代码转换为 spark 作业。 但是当我运行查询时，它会出现以下错误： 状态：失败失败：执行错误，从 org.apache.hadoop.hive.ql.exec.spark.SparkTask 返回代码 3 ...

如何在配置单元中将不确定的键连接在一起？

[英]How to concat uncertain keys together in hive?

得到这样的源数据。 而且所有的密钥都是不确定的。 我想concat(all_keys, ',') if value > 0.5 order by value desc 。 正确的结果是 'k2,k1' 我应该如何在蜂巢中做到这一点？ ...

Nifi 1.19.1 中缺少 Hive 处理器

[英]Missing Hive Processors In Nifi 1.19.1

我下载了最新的 Nifi 版本。 我能够将 nifi 连接到 oracle 数据库并且工作正常。 但是，我需要将 nifi 连接到配置单元，我的问题是我找不到任何与配置单元相关的处理器。 没有 SelectHiveQL 处理器，也没有 PutHiveQL 处理器或任何与 hive 相关的处理器。 甚 ...

大数据（spark sql 和 spark dataframes 连接）

[英]Big data(spark sql and spark dataframes connection)

我是大数据平台的新手。 您能否让我知道不同的方式：1）我们如何连接到 Spark sql 的 spark？ 2）我们如何连接到 spark 以获取 spark 数据帧或数据集？ 对于 hive，我们通过 unix 与直线连接，如果我们有 sql 工具，例如：teradata，我们必须通过 odb ...


排序:
质量:
 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM