cost 287 ms
HDP 集群的 Apache ranger hive 插件不起作用 - Apache ranger hive plugin for HDP cluster is not working

我有一个集群 HDP 3.1.5,我必须在 hive 上应用 ranger 策略,但是在成功启用 hive 插件后,它没有在 ranger --> audit --> 插件状态中注册。 并且所有用户都无法访问 hive 中的所有资源(数据库、表)。 启用 hive 插件后不会创建默认策略 ...

为什么 ambari 显示此 kerberos 身份验证错误:AmbariAuthToLocalUserDetailsService - Why does ambari is showing this kerberos authentication error : AmbariAuthToLocalUserDetailsService

最近 ambari 服务器日志显示一些警告,我们还没有发现任何问题,但日志变得不可读(50 行/秒) /var/log/ambari-server/ambari-server.log /var/log/ambari-server/ambari-audit.log 已知问题: https://i ...

如何获取hadoop最新版本的hortonworks数据平台和cloudera发行版 - How to get hortonworks data platform and cloudera distribution for hadoop latest version

我目前正在研究CDH5.13 (Cloudera Distribution Hadoop) ,我有几个问题: 1- 我想获得最新版本的 CDH(6.3.3)。 当我尝试下载它时,我收到此消息(您的 MyCloudera 帐户当前未连接 CDH 订阅,这是 CDH 6.3.3 及更高版本所需的。) ...

如何将文件从 /user/maria_dev/tutorials/test.csv (HDP) 复制到 /sandbox/tutorial-files/640/nifi/input (HDF)? - How to copy a file from /user/maria_dev/tutorials/test.csv (HDP) to /sandbox/tutorial-files/640/nifi/input (HDF)?

在 Docker 桌面上使用 Hortonworks HDP 3.0.1 和 HDF 沙盒我已登录 HDP,并尝试将文件从 /user/maria_dev/tutorials/test.csv 复制到 HDF 的 /sandbox/tutorial-files/640/nifi/input 但这不 ...

我们是否需要在所有节点中安装所有 HDP 的服务客户端? - Do we need install all HDP's Services Client in all node?

我们想在生产环境中部署 HDP 3.1.5 我们有 3 台服务器用于 masternode 和 6 台服务器用于 workernode 我们已经计划了上面 9 个节点的组件布局,但我们想确定我们需要在下面放置服务客户端的位置纱线客户首先,我们计划将它安装到 9 个节点,可以安装还是只安装到 3 个 ...

Hive - 在 hive sql 中将纪元时间(毫秒 - 13 位)转换为时间戳直到毫秒 - Hive - Convert epoch time (ms - 13 digit) to timestamp till milliseconds in hive sql

我需要从 hive 查询中的纪元时间戳获取完整的时间戳。 我在 hive 中的方法: 我的问题:我们是否有更好的方法来获取直到毫秒的时间戳值? 我们可以轻松获得第二名的价值。 ...

如何加载分区到 Hbase 表的 hive orc - How to load hive orc partitioned to Hbase table

我完全开始使用 hbase 数据存储,我们目前正在使用 orc 文件格式迁移 hive 外部文件系统。 过去 2 年的数据需要移动到 hbase 表,我看到很少有批量加载方法 hcatalog 和 pig 使用但不是 orc 文件格式。 你能帮我解决这个问题或给我一些建议吗? 这里我也提到了 hiv ...

无法启动 Ambari 服务 - Cannot start Ambari services

我通过 Virtualbox 安装了 Hortonworks Sandbox。 当我启动 ambari 时,所有服务都停止了,就像您在此屏幕截图中看到的那样 我尝试手动启动每个服务,但是当我单击开始按钮时没有任何反应。 另外,我的通知部分有很多错误。 这也是我的 ambari 代理日志的样子log ...

Oozie Spark 操作工作流无法启动 - Oozie Spark action workflow can not start

我有一个不能通过 Oozie 运行的简单火花作业。 相同的火花作业通过火花提交运行。 我提交作业工作流并收到以下错误: 这是job.properties: 这是工作流 XML: 同一个集群可以毫无问题地运行其他操作和工作流。 一旦 spark 操作成为工作流的一部分,此错误就会导致启动器 ...

在 Windows 10 中使用 Docker - 对于 HDP,我执行了“sh docker-deploy-hdp30.sh”但收到端口 50079 错误 - Using Docker in Windows 10 - For HDP I executed 'sh docker-deploy-hdp30.sh' but received a port 50079 error

我在 Windows 10 中使用 Docker(使用最新版本的 Docker 桌面 - 也是 Docker 的初学者)。我下载了最新的 Docker HDP,解压缩文件夹并在 Git Bash 中执行脚本“sh docker-deploy-hdp30.sh”我收到端口 50079 的错误,如下面的 ...

在带有配置单元的无头模式下在 HDP 3.1 上触发 3.x - 找不到配置单元表 - spark 3.x on HDP 3.1 in headless mode with hive - hive tables not found

如何使用无头 ( https://spark.apache.org/docs/latest/hadoop-provided.html ) 版本的 spark 在 HDP 3.1 上配置 Spark 3.x 以与 hive 交互? 首先,我已经下载并解压了 headless spark 3.x: ...

Spark Structured Streaming:: 意外错误:: STATUS_INVALID_HANDLE with path="" - Spark Structured Streaming :: Unexpected error:: STATUS_INVALID_HANDLE with path=""

我在 Hortonworks (2.6.4) 上有 Spark (2.4.4) Structure Streaming Job,在模式验证流作业将这些消息存储到 HBASE 和 HIVE 之后,我正在阅读来自 kafka 主题的消息。 执行 6-7 小时后,作业因STATUS_INVALID_HA ...

SparkSession.catalog.clearCache() 可以从 hdfs 中删除数据吗? - Can SparkSession.catalog.clearCache() delete data from hdfs?

自从我们从 CDH 迁移到 HDP(spark 2.2 到 2.3)后,我遇到了一些数据删除问题。 这些表是从 hdfs 位置读取的,在运行读取和处理这些表的 spark 作业一段时间后,它会抛出table not found 异常,当我们检查该位置时,所有记录都消失了。 在读取该表之前我看到的 ...


 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM