繁体   English   中英

蜂巢计算统计HDP 2.6

Hive Compute Statistic HDP 2.6

提示:本站收集StackOverFlow近2千万问答,支持中英文搜索,鼠标放在语句上弹窗显示对应的参考中文或英文, 本站还提供   中文繁体   英文版本   中英对照 版本,有任何建议请联系yoyou2525@163.com。

尝试查看特定列的统计信息。 我先执行了ANALYZE命令,然后尝试通过DESCRIBE FORMATTED <table_name> <col_name>查看统计信息。

我看不到任何值。 知道为什么它不显示任何值吗?

我尝试了MSCK并再次分析了该表并检查了统计信息。 到目前为止没有运气。

hive> desc extended testdb.table order_dispatch_diff;
OK
order_dispatch_diff     int                     from deserializer
Time taken: 0.041 seconds, Fetched: 1 row(s)
2 个回复

尝试使用FOR COLUMNS参数进行操作:

ANALYZE TABLE testdb.table COMPUTE STATISTICS FOR COLUMNS;

然后使用DESCRIBE FORMATTED testdb.table order_dispatch_diff; 显示统计信息。

有关更多详细信息,请参见列统计信息文档。

以下Statement最终为我工作。

配置单元> desc格式化的testdb.table col_name分区(data_dt ='20180715');

2 蜂巢统计

我正在尝试计算ORC文件的统计信息,但我无法看到PART_COL_STATS的任何更改以及使用 获取列的最大值它正在运行完全Map减少列..我想要使用的是存储在元存储中的最大值,但我无法捕获这些统计信息。 我的表格是: 我的分析查询是: 我总是得到0作为loadin ...

3 蜂巢无法与Ambari一起使用HDP

我已经使用Ambari 2.6.1安装了HDP。 它主要自动完成所有操作,但Hive无法正常启动。 我在某处看到一个帖子,并删除了该pid并终止了该进程,希望重新启动它并可以正常运行,但是现在它显示出机器上的心跳丢失。 请指导我该怎么办? 我列出了从ambari得到的错误。 ...

5 无法在HDP 2.6上安装Apache Spark 1

我是Spark的初学者。 我一直试图通过在VMWare Workstation上安装HDP 2.6来学习Scala的Spark。 我使用PuTTY连接到服务器并进行练习,我可以在同一位置安装scala和java。 当我尝试安装Spark(tar -xvf spark-1.3.1-bin-h ...

6 将 Spark Dataframe 写入 HDP2.6 中的 Hive 可访问表

我知道已经有很多关于从 Spark 写信给 HIVE 的答案,但似乎没有一个对我有用。 首先是一些背景。 这是一个较旧的集群,运行 HDP2.6,即 Hive2 和 Spark 2.1。 这是一个示例程序: 如果我登录 spark-shell 并运行该代码,则会在 Hive 中显示一个名为 r ...

7 RegionServer在HDP 2.6中消耗过多的内存

当我们对数据库(HBase)进行任何操作时,RegionServers占用了过多的内存,直到重新启动它们才释放。 是否有任何参数或属性可以释放ram或限制RegionServer占用大量内存? 帮助将不胜感激。 ...

2017-12-05 12:19:07 0 78   hbase
8 带有 HDP 2.6 堆栈的 Apache spark 3.0

我们计划在现有 HDP 2.6 集群之外设置 Apache Spark 3.0,并在该集群中使用 yarn(v2.7) 提交作业,而无需升级或修改。 目前用户使用的是包含在 HDP 堆栈中的 Spark 2.3。 目标是在不中断当前作业的情况下,在 HDP 集群之外启用 Apache Spark 3 ...

9 Hive到HDP 2.6的连接器不起作用

我正在使用KNIME 3.4.1,并尝试使用此KNIME博客文章将其连接到HDP 2.6.1。 出了非洲油票 krb5.conf文件位于KNIME jre下 我已经添加了Hortonworks Hive JDBC jar,但是该驱动程序未显示在配置中。 随附的 ...

2017-10-06 09:15:25 1 210   knime
暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2022 STACKOOM.COM