TTPReplicaOptimizer
接口功能
完成ModelLink中DP Size为偶数时优化器数据副本备份。
接口格式
TTPReplicaOptimizer(DistributedOptimizer)
接口参数
父类 |
是否必选 |
说明 |
取值要求 |
|---|---|---|---|
DistributedOptimizer |
必选 |
AscendSpeed框架提供的优化器。 |
- |
返回值
无
父主题: API接口参考
完成ModelLink中DP Size为偶数时优化器数据副本备份。
TTPReplicaOptimizer(DistributedOptimizer)
父类 |
是否必选 |
说明 |
取值要求 |
|---|---|---|---|
DistributedOptimizer |
必选 |
AscendSpeed框架提供的优化器。 |
- |
无