使用Volcano和Ascend Operator组件场景下,业务面故障的任务所有Pod的Status全部转变为Failed,任务无法发生无条件重试重调度。
当前Volcano在业务面故障的任务所有Pod的Status全部转变为Failed时,会将任务设置为失败状态,默认不会拉起无条件重试重调度。
用户可自行修改Volcano源码和任务yaml,在所有Pod的Status全部转变为Failed后会发生无条件重试故障重调度。
func (ps *runningState) Execute(action v1alpha1.Action) error { switch action { case v1alpha1.RestartJobAction: return KillJob(ps.job, PodRetainPhaseNone, func(status *vcbatch.JobStatus) bool{ status.State.Phase = vcbatch.Restarting status.RetryCount+﹢ return true }) case v1alpha1.AbortJobAction: return KillJob(ps.job, PodRetainPhasesoft, func(status *vcbatch.Jobstatus) bool { status.State.Phase = vcbatch.Aborting return true }) case v1alpha1.TerminateJobAction: return KillJob(ps.job, PodRetainPhasesoft, func(status *vcbatch.Jobstatus) bool { status.State.Phase = vcbatch.Terminating return true }) case v1alpha1.CompleteJobAction: return KillJob(ps.job, PodRetainPhaseSoft, func(status *vcbatch.JobStatus) bool { status.State.Phase =vcbatch.Completing return true }) case v1alpha1.IgnoreAction: //增加case v1alpha1.IgnoreAction代码 return nil default:
IgnoreAction Action = "Ignore"