[英]Resource manager vs No Resource manager
我想知道,使用resource manager
和without resource manager
使用资源管理器在 N 节点集群中运行 spark 作业有什么区别?
请分享
Cluster Manager负责获取集群上的资源,分配给spark应用。 请参阅:文档中的 Spark 架构
运行 Spark 的集群管理器提供了跨应用程序调度的工具。 参考: 这里
因此,如果没有任何集群管理器,spark 作业将无法获取集群上的资源。
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.