[英]Error while trying to preview data in DataFlow in Azure Synaspe
我在 Azure Synaspe 中有一个数据管道。 Pipeline 有一个数据流活动,它从 Azure Data Lake Storage Gen 2 数据湖中的 Spark 数据库读取数据。 然后数据会下沉到另一个 spark 数据库中。
前几天我尝试从源 spark 数据库进行预览时,出现以下错误(数据源名称被屏蔽)。
在源“<>”:org.apache.hadoop.hive.ql.metadata.HiveException:MetaException(消息:null);
这以前工作得很好。
请注意:此管道没有代码更改。
有什么想法吗
确保 Spark 池配置的Autoscale
为 Enable。
您应该尝试增加节点数。
也尝试更多的节点大小。
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.