如何从基于 Intellij 构建的本地 Spark 服务器访问位于 HDInsight 中的 Hive 集群中的表
[英]How to access table from Hive cluster located in HDInsight from Local Spark Server built on Intellij
问题描述
我无法从我的本地实例访问和读取位于 HDInsight 中的 Hive 表中的数据，其中应用程序在 Intellij 和 Maven 上构建。
当我们需要将数据从 Spark 写入 Hive 但 Hive 位于 HDInsight 上而 Spark 位于本地本机实例上时，请有人帮我解决方案的先决条件。
注意：我在 HDInsight 上没有 Spark 集群，我在 HDInsight 上只有 hive 集群。
请分享您的评论
1 个解决方案
解决方案1
0 已采纳 2019-10-28 07:57:42
请将集群的 hive-site.xml 添加到资源文件夹中。 此外，请确保您为本地网络打开了网络端口。 请参考以下链接。
https://cwiki.apache.org/confluence/display/Hive/Hive+on+Spark%3A+Getting+Started
无法在HDI 3.6 Spark HDInsight群集中从Ambari访问oozie的Web UI
[英]unable to access web UI of oozie from Ambari in HDI 3.6 spark HDInsight cluster
从公网/本地机器连接到Azure HDInsight Kafka集群
[英]Connect to Azure HDInsight Kafka cluster from public network / local machine
从群集中的其他Azure HDinsight群集访问Hive表
[英]Accessing Hive tables from other Azure HDinsight cluster from within our cluster
如何从在HDInsight上运行的Apache Spark读取Azure表存储数据
[英]How to read Azure Table Storage data from Apache Spark running on HDInsight
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
相关问题
无法从HDInsight群集上的Spark UI访问日志
从HDInsight群集头节点运行Spark应用程序
无法在HDI 3.6 Spark HDInsight群集中从Ambari访问oozie的Web UI
如何通过代码在HDInsight群集上运行命令？
从公网/本地机器连接到Azure HDInsight Kafka集群
从群集中的其他Azure HDinsight群集访问Hive表
如何从在HDInsight上运行的Apache Spark读取Azure表存储数据
尝试从.NET调用HDInsight上的Hive作业
从hdinsight中的配置单元查询将数据写入文件系统
如何使用Azure自动化从HDInsight启动Spark 2.0
相关标签