[英]What is a stage in Apache Spark?
因此我知道阶段是在同一节点上工作的一组任务。
那为什么在本地工作时会得到两个阶段？
阶段是一组并行任务-每个分区一个任务。 阶段数由混洗/宽转换的数目定义。
因此，回到您的情况，如果您有随机播放操作，那么它将分为两个阶段。
Apache Spark web UI 中的“Stage Skipped”是什么意思？
[英]What does "Stage Skipped" mean in Apache Spark web UI?
spark中的application、job、stage、task是什么概念？
[英]What is the concept of application, job, stage and task in spark?
如何知道Apache Spark中当前正在运行的作业的哪个阶段？
[英]How to know which stage of a job is currently running in Apache Spark?
带有 Spark runner 的 Apache Beam，将不同的阶段安排到不同的服务器
[英]Apache Beam with Spark runner, schedule different stage to different servers
org.apache.spark.SparkException：由于阶段失败，作业中止了：
[英]org.apache.spark.SparkException: Job aborted due to stage failure:
在Apache Spark中，同一阶段中的任务是否可以同时工作？
[英]In Apache Spark , do Tasks in the same Stage work simultaneously or not?
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
