Hive regexp_extract numeric value from a string

[英]Hive regexp_extract numeric value from a string

我有一张桌子： 我正在尝试从表中获取数值。 预期的 output 是 A -> 123 / B -> 124 等我正在尝试使用 regexp_extract 请问有什么建议吗？ ...

如何查找和计算日期时间发生在 1 秒内的行？

[英]How to find and count rows with datetime that happend within 1 second?

假设我有带有用户 ip 和时间戳的请求日志。 如何找到在 1 秒间隔内发出超过或等于 5 个请求的用户？ user_ip1 在 16:11:10 发出了 3 个请求，在 16:11:11 发出了 3 个请求，即 6 个请求，从 10.56 开始到 11.30 结束，时间为 0.74 秒。 而 ...

解密后如何从 Hive 导出 csv 中的一行中删除额外的选项卡

[英]How to remove extra tab from a row in Hive export csv after decryption

从 hive 导出数据时遇到的问题： 蜂巢版本：2.6.5 大查询输出错误中的质量检查：错误消息：从位置开始的行中有太多值：2121402186。发现 22 列，预期为 21 第 1 步：使用命令将 hive 中的数据导出到 csv 中： 第二步：将此文件上传到big query查看数据是 ...

如何返回数组<struct>来自 hive 中的 json_tuple

[英]How to return array<struct> from json_tuple in hive

我有一个带有 json 列的配置单元表。 它是兽人格式，只有一列有一个 json 字符串。 json_column { "type":"REGULAR", "period":[ "ONCE_PER_FOUR_WEEK", "ONCE_PER_SIX_WE ...

来自点击流数据的用户级 session_start_time 和 session_end 时间

[英]user level session_start_time and session_end time from clickstream data

输入 输出 我们需要编写一个 SQL 查询，在不使用 LEAD() 和 LAG() 的情况下，从输入数据中获取上述输出。 ...

如何在蜂巢中获得本季度的最后一天

[英]how to get the last day of the quarter in hive

我正在尝试使用 hive 获取季度的第一个和最后一个日期。 对于本季度的第一天，这很好用： 但是我无法使用 hive 检索本季度的最后一天。 例如：在这种情况下为 2021-12-31 请你帮助我好吗。 ...

如何在 HIVE 中展平 json 结构？

[英]How to flatten a json structure in HIVE?

我有一个看起来像这样的 JSON 结构（一列中嵌套了一个结构）： 标题： 当我查询时，这有效： 但是当我想找到位置（嵌套的 json 结构）时，它不起作用： 有谁知道如何在 HIVE 中查询这个？ ...

用其他表中一列的唯一值数填充sql表中的一列

[英]Fill a column in sql table with the number of unique values of a column from other table

我有两个 sql 表 t1 和 t2，我想用 t2 中一列中唯一值的数量填充 t1 中的一列。 示例：t1 有两列a和count 示例：t2 有一列 b t2 在 b 列中有 3 个唯一值，我想要像这样的 t1，列count由 t2.b 中唯一值的数量填充 ...

如何获取季度的第一天和最后一天以及hive时间维度中的截止日期

[英]how to get first and last day of quarter and the cutoff in hive time dimension

我正在 hive 中构建一个查询以创建一个时间维度，它将选择从 2010-01-01 到当前日期的日期并显示年份季度 year_cutoff(date -7) 和 quarter cutoff(date - 7) 询问： 结果： 我需要计算另外 3 列，如 quarter_last_date、Fir ...

如何使用一列的选择从一个配置单元表插入到另一个配置单元表

[英]How to insert from one hive table to another using select for one column

我正在尝试使用以下方法从一张表插入到另一张表： Insert into table energyx Select log_id, house_id, condate, conhour, energy_reading, flag, (select substring(condate, 0 ...

GreenPlum SQL 查询转换为 Hive

[英]GreenPlum SQL query to convert into Hive

下面的查询我们想将 greenplum SQL 转换为 hive sql，请帮助我们。 ...

根据日期和 ID 计算每年和每月的记录

[英]Count records per year and month based on date & id

我有下表。 我想根据 location_id 和 type_id 计算每年/每月的记录数。 我想要的输出应该是这样的： 我尝试过的： 但是这个查询的问题是我没有得到表中每个初始行的计数，我丢失了日期信息。 任何帮助，将不胜感激 使用 MySQL/HiveQL 的数据 ...

如何在 hive 中创建基于 linux/unix 组的权限？

[英]How to create linux/unix group based permission in hive?

我们在 hive 中有很多带有表的数据库，我们想根据 Linux/Unix 组授予用户访问权限，目前我们正在使用 hive 角色和用户级别权限，但我们想切换到表和数据库级别的 linux/unix 组允许。 我们怎么做？ ...

左连接 - 左表的第一场比赛

[英]Left join - First match on left table

我正在使用星型模式的数据库。 我正在加入一个带有多维表 (5) 和外部表 E 的初步事实表 F（15+ 列）。 初步事实表 F 外部表 我写了两个想要的输出，因为我真的不介意外部表的预算是在两个匹配 (v2) 之间分配还是完全归因于一个匹配 (v1)。 将在日期、location_name ...

在 hive 中，如何将列转换为行

[英]In hive, How to Convert column to row

在蜂巢中，如何将列转换为行？ 例如 （原样） 指数 姓名 sku1_nm sku1_cnt sku2_cnt sku2_cnt sku3_nm sku3_cnt ...

Hive：如何删除“”并将其更改为日期格式

[英]Hive: how to delete "" and change it to date format

我的数据集的日期列（tweet_stamp）显示为“2020-01-29 00-21-29”，它是字符串格式。 我希望结果为 2020-01-29。 如何删除字符串中的“”并将其更改为日期格式？ 我尝试了如下代码 select to_date(from_unixtime(unix_timest ...

如何在 HIVE hql 中添加两个计数？

[英]How do I add two counts in HIVE hql?

所以我知道我可以通过使用 select count(*) from table1 来获取一张表的计数； 我试过 select(select count( ) from table1) table1, (select count( ) from table2) table2 from dual; ...

Hive 中的时间戳解析

[英]Timestamp parsing in Hive

我正在尝试读取时间戳并根据我的要求在 Hive 中以不同的格式重建它。 但是，我似乎无法正确获取月份和日期。 我怀疑时间戳格式不正确，但不确定我哪里出错了。 询问 输出 ...

我将如何使用字典在 Hive 中进行映射？

[英]How would I use a dictionary for mapping in Hive?

假设我有一个表“my_table”： 和字典： 我想要做： select dict[region_code] as region_code, name from my_table中获取select dict[region_code] as region_code, name from m ...

如何在 hive sql 中选择特定结构值的数组？

[英]How to select an array of specific struct values in hive sql?

假设我在名为 myTable 的表中有一个包含此格式数据的列： 我的专栏 [{"id": 1, color: "red"}, {"id": 2, color: "blue"}] [{"id": 1, co ...