apache-spark - 当任务失败的最大尝试次数时会发生什么？

Question

通过尝试的最大值后，失败的 Spark 任务会获得新的任务 ID 吗？

在最大尝试之后，另一个尝试会发送到具有新任务 ID 的不同执行器吗？

标签： apache-spark

Answer 1

通过尝试的最大值后，失败的 Spark 任务会获得新的任务 ID 吗？

任务的最大尝试失败整个阶段，因此 Spark 作业。

分配任务是随机的（跨可用的执行程序），并且失败的任务不太可能再次分配给同一个执行程序（在 4 次尝试内）。