如何衡量 Google Cloud Dataproc 中的高可用性
[英]How to measure High Availability in Google cloud Dataproc
问题描述
根据谷歌文档，测量 Dataproc 的高可用性基于 HDFS & YARN 可用性不基于区域/区域。 是否可以将一个主控器保留在一个区域中，而将另一个主控器保留在不同的区域中以使 HA 在上下文中定位到位置？ 还请详细说明，在 Global Endpoint 中配置 Dataproc 集群是否在上下文中实现 HA？
我已经浏览了谷歌文档，但这并没有消除上述疑虑。
1 个解决方案
解决方案1
0 已采纳 2020-05-19 15:58:03
不，Dataproc HA 不保证区域可用性，因为所有 Dataproc 集群节点都应位于同一个 GCP 地区。
要实现区域可用性，您需要在多个区域中创建 Dataproc 集群，并使用带有基于标签的集群选择器的Dataproc 工作流模板来跨区域集群分发作业提交。
如何在 Google Cloud Platform 上查看 Dataproc 作业中的 output 文件
[英]How to view output files from Dataproc job on Google Cloud Platform
如何从机器内部在Google Cloud Dataproc上运行Hive？
[英]How to run hive on google cloud dataproc from within the machine?
我可以将 GCP Dataproc 集群从标准（1 个主节点，N 个工作节点）更改为高可用性吗？
[英]Can I change GCP Dataproc cluster from Standard (1 master, N workers) to High Availability?
如何使用谷歌云将文件从Dataproc中的GCS存储桶复制到HDFS？
[英]How to copy a file from a GCS bucket in Dataproc to HDFS using google cloud?
如何在使用Google Cloud Dataproc启动的Spark群集中启用Snappy编解码器支持？
[英]How do I enable Snappy codec support in a Spark cluster launched with Google Cloud Dataproc?
如何在Google Cloud Storage中存储大量小的HTML文件来优化Dataproc？
[英]How to store lots of small HTML files in Google Cloud Storage to optimize Dataproc?
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
相关问题
在Google Cloud Dataproc上运行xgboost
如何在 Google Cloud Platform 上查看 Dataproc 作业中的 output 文件
如何从机器内部在Google Cloud Dataproc上运行Hive？
在Google Cloud Dataproc中按顺序运行提交的作业
nutch在谷歌cloud-gloud dataproc上的Hadoop上
Google Cloud Dataproc - Spark和Hadoop版本
我可以将 GCP Dataproc 集群从标准（1 个主节点，N 个工作节点）更改为高可用性吗？
如何使用谷歌云将文件从Dataproc中的GCS存储桶复制到HDFS？
如何在使用Google Cloud Dataproc启动的Spark群集中启用Snappy编解码器支持？
如何在Google Cloud Storage中存储大量小的HTML文件来优化Dataproc？
相关标签