Spark任务重试机制

  • 如果重试 3 次 依然失败, 那么这个 task 所在的 stage 就失败了

  • 如果 stage 失败了则由 DAGScheduler 来负责重试, 重新发送 TaskSet 到 TaskScheduler, Stage 默认重试 4 次。

  • 如果重试 4 次 以后依然失败, 那么 该 job 就失败了。

  • 一个 job 失败了, Application 就失败了。

标签: 重试、失败、stage、依然、job、面试
  • 回复
隐藏