我有一个集群 HDP 3.1.5,我必须在 hive 上应用 ranger 策略,但是在成功启用 hive 插件后,它没有在 ranger --> audit --> 插件状态中注册。 并且所有用户都无法访问 hive 中的所有资源(数据库、表)。 启用 hive 插件后不会创建默认策略 ...
我有一个集群 HDP 3.1.5,我必须在 hive 上应用 ranger 策略,但是在成功启用 hive 插件后,它没有在 ranger --> audit --> 插件状态中注册。 并且所有用户都无法访问 hive 中的所有资源(数据库、表)。 启用 hive 插件后不会创建默认策略 ...
当尝试使用 Hortonworks Sandbox 2.6.5 上传超过 200Mb 的文件时出现错误“request Entity Too large”是否有任何解决方案? ...
我正在尝试在 HDP2.6.5 上安装 python pip,但它不断失败并显示错误 403。 ...
最近 ambari 服务器日志显示一些警告,我们还没有发现任何问题,但日志变得不可读(50 行/秒) /var/log/ambari-server/ambari-server.log /var/log/ambari-server/ambari-audit.log 已知问题: https://i ...
我目前正在研究CDH5.13 (Cloudera Distribution Hadoop) ,我有几个问题: 1- 我想获得最新版本的 CDH(6.3.3)。 当我尝试下载它时,我收到此消息(您的 MyCloudera 帐户当前未连接 CDH 订阅,这是 CDH 6.3.3 及更高版本所需的。) ...
我正在将 Apache NiFi 1.9.2(安全集群)与 HDP 3.1.4 集成。 HDP 包含带有 SASL 身份验证 (Kerberos) 的 Zookeeper 3.4.6。 NiFi 节点成功连接到此 Zookeeper,同步流并记录心跳。 同时,使用 Zookeeper 的 Ni ...
我们正在尝试下载 ambari 版本 2.6.1 但没有成功(根据https://docs.hortonworks.com.s3.amazonaws.com/HDPDocuments/HDF3/HDF-3.1.1/bk_installing-h -p... ) 知道为什么我们得到ERROR 403: ...
在 Docker 桌面上使用 Hortonworks HDP 3.0.1 和 HDF 沙盒我已登录 HDP,并尝试将文件从 /user/maria_dev/tutorials/test.csv 复制到 HDF 的 /sandbox/tutorial-files/640/nifi/input 但这不 ...
我们想在生产环境中部署 HDP 3.1.5 我们有 3 台服务器用于 masternode 和 6 台服务器用于 workernode 我们已经计划了上面 9 个节点的组件布局,但我们想确定我们需要在下面放置服务客户端的位置纱线客户首先,我们计划将它安装到 9 个节点,可以安装还是只安装到 3 个 ...
我需要从 hive 查询中的纪元时间戳获取完整的时间戳。 我在 hive 中的方法: 我的问题:我们是否有更好的方法来获取直到毫秒的时间戳值? 我们可以轻松获得第二名的价值。 ...
我完全开始使用 hbase 数据存储,我们目前正在使用 orc 文件格式迁移 hive 外部文件系统。 过去 2 年的数据需要移动到 hbase 表,我看到很少有批量加载方法 hcatalog 和 pig 使用但不是 orc 文件格式。 你能帮我解决这个问题或给我一些建议吗? 这里我也提到了 hiv ...
我正在尝试设置 HDP 沙箱并处理大数据项目。但是在尝试进行 yum 安装时,出现以下错误 http://s3.amazonaws.com/dev.hortonworks.com/ambari/centos6/2.x/BUILDS/2.4.0.0-1225/repodata/repom ...
我通过 Virtualbox 安装了 Hortonworks Sandbox。 当我启动 ambari 时,所有服务都停止了,就像您在此屏幕截图中看到的那样 我尝试手动启动每个服务,但是当我单击开始按钮时没有任何反应。 另外,我的通知部分有很多错误。 这也是我的 ambari 代理日志的样子log ...
我有一个不能通过 Oozie 运行的简单火花作业。 相同的火花作业通过火花提交运行。 我提交作业工作流并收到以下错误: 这是job.properties: 这是工作流 XML: 同一个集群可以毫无问题地运行其他操作和工作流。 一旦 spark 操作成为工作流的一部分,此错误就会导致启动器 ...
我刚刚通过 virtualbox 安装了 Hortonwroks Sandbox。 当我启动 Ambari 时,每个服务都是红色的,就像您在此屏幕截图中看到的那样。 我错过了什么吗? 我是 Hadoop 的初学者 ...
我们有一个 Hadoop 集群,其中包含一个非常旧的 PostgreSQL 数据库 (9.2),用于存储集群元数据。 是否可以用更新的版本替换它? 我担心破坏集群,我应该考虑什么? ...
我在 Windows 10 中使用 Docker(使用最新版本的 Docker 桌面 - 也是 Docker 的初学者)。我下载了最新的 Docker HDP,解压缩文件夹并在 Git Bash 中执行脚本“sh docker-deploy-hdp30.sh”我收到端口 50079 的错误,如下面的 ...
如何使用无头 ( https://spark.apache.org/docs/latest/hadoop-provided.html ) 版本的 spark 在 HDP 3.1 上配置 Spark 3.x 以与 hive 交互? 首先,我已经下载并解压了 headless spark 3.x: ...
我在 Hortonworks (2.6.4) 上有 Spark (2.4.4) Structure Streaming Job,在模式验证流作业将这些消息存储到 HBASE 和 HIVE 之后,我正在阅读来自 kafka 主题的消息。 执行 6-7 小时后,作业因STATUS_INVALID_HA ...
自从我们从 CDH 迁移到 HDP(spark 2.2 到 2.3)后,我遇到了一些数据删除问题。 这些表是从 hdfs 位置读取的,在运行读取和处理这些表的 spark 作业一段时间后,它会抛出table not found 异常,当我们检查该位置时,所有记录都消失了。 在读取该表之前我看到的 ...