特性列表

并行算法优化

提供昇腾亲和的多维度并行加速

• 数据并行
• 张量并行
• 序列并行
• 流水线并行
• 虚拟流水并行

显存资源优化

支持高效内存算法，最大化性能无损

• 重计算
• 分布式优化器
• 显存碎片优化
• 自适应选择重计算

通信性能优化

发挥极致通信性能，实现计算与通信并行

• 异步DDP
• TP重计算通信优化
• 计算通信并行优化

计算性能优化

全场景高性能融合算子加速库，昇腾亲和优化

高性能融合算子：

npu_dropout_add_layer_norm