[英]Spark driver dies, does executors die too?
在spark 2.x中,如果驱动程序死了,执行者也死了吗? 如果是,如果重新启动,整个作业将再次从检查点目录开始引用吗?
驱动程序是Spark应用程序中的单点故障。 如果驱动程序死了,所有其他链接的组件也将被丢弃。
在使用检查点以提高可靠性(流)的应用程序中,检查点可用于恢复状态。 请参阅:
有关详细信息。
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.