aclnnLayerNorm&aclnnLayerNormWithImplMode
产品支持情况
功能说明
接口功能:对指定层进行均值为0、标准差为1的归一化计算。aclnnLayerNormWithImplMode接口相比aclnnLayerNorm接口,可以通过配置impl_mode参数选择不同的归一化实现策略,以适应不同的应用场景和性能需求。
计算公式:
其中,E[x]表示输入的均值,Var[x]表示输入的方差。
函数原型
每个算子分为,必须先调用“aclnnLayerNormGetWorkspaceSize”或者“aclnnLayerNormWithImplModeGetWorkspaceSize”接口获取计算所需workspace大小以及包含了算子计算流程的执行器,再调用“aclnnLayerNorm”或者“aclnnLayerNormWithImplMode”接口执行计算。
[object Object]
[object Object]
[object Object]
[object Object]
aclnnLayerNormGetWorkspaceSize
参数说明:
[object Object]- [object Object]Atlas 训练系列产品[object Object]、[object Object]Atlas 200I/500 A2 推理产品[object Object]:参数
[object Object]、[object Object]、[object Object]、[object Object]、[object Object]、[object Object]的数据类型不支持BFLOAT16。
- [object Object]Atlas 训练系列产品[object Object]、[object Object]Atlas 200I/500 A2 推理产品[object Object]:参数
返回值:
第一段接口完成入参校验,出现以下场景时报错:
[object Object]
aclnnLayerNorm
aclnnLayerNormWithImplModeGetWorkspaceSize
参数说明:
[object Object]- [object Object]Atlas 训练系列产品[object Object]、[object Object]Atlas 200I/500 A2 推理产品[object Object]:参数
[object Object]、[object Object]、[object Object]、[object Object]、[object Object]、[object Object]的数据类型不支持BFLOAT16。
- [object Object]Atlas 训练系列产品[object Object]、[object Object]Atlas 200I/500 A2 推理产品[object Object]:参数
返回值:
第一段接口完成入参校验,出现以下场景时报错:
[object Object]
aclnnLayerNormWithImplMode
约束说明
- input、normalizedShape、weightOptional(非空时)、biasOptional(非空时)、out、meanOutOptional(非空时)或rstdOutOptional(非空时)的shape不超过8维。
- 确定性计算:
- aclnnLayerNorm默认确定性实现。
- aclnnLayerNormWithImplMode默认确定性实现。
调用示例
aclnnLayerNorm示例:
[object Object]aclnnLayerNormWithImplMode示例:
[object Object]