繁体   English   中英

HDInsight Spark群集-无法连接到Azure Data Lake Store

[英]HDInsight Spark cluster - can't connect to Azure Data Lake Store

因此,我创建了一个HDInsight Spark群集。 我希望它访问Azure Data Lake Store。

要创建HDInsight Spark群集,我按照以下说明进行操作: https ://azure.microsoft.com/zh-cn/documentation/articles/data-lake-store-hdinsight-hadoop-use-portal,但是在Azure门户以配置AAD或添加服务原则。

因此,我的群集仅使用Azure Blob存储创建。 现在,我想扩展它以访问Azure Data Lake Store。 但是,“群集AAD身份”对话框状态为“服务主体:已禁用”,对话框中的所有字段均为灰色且已禁用。 我看不到任何方法来扩展存储以指向ADL。

任何帮助,将不胜感激! 谢谢 :-)

您可以使用Data Factory将数据从Blob移动到ADLS,但不能从Spark集群直接访问ADLS。

请使用ServicePrincipal创建一个Azure Hdinsight群集。 ServicePrincipal应该有权访问您的数据湖存储帐户。 您可以将集群配置为使用Data Lake存储,但这非常复杂。 实际上,没有任何文档。 因此,推荐的创建方法是使用ServicePrincipal。

您创建了哪种类型的集群? 在我们的Linux集群中,您链接的指南中列出的所有选项均可用。

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM