aclnnFastLayerNorm

产品支持情况

[object Object]undefined

功能说明

• 接口功能：对指定层进行均值为0、标准差为1的归一化计算。aclnnFastLayerNorm接口相比aclnnLayerNorm接口，整体性能提升了50%，内存与GPU保持一致，累加序优化导致精度存在差异。

• 计算公式：

  $$out = \frac{x - \mathrm{E}[x]}{ \sqrt{\mathrm{Var}[x] + eps}} * weightOptional + biasOptional$$ $$meanOutOptional = \mathrm{E}[x]$$ $$rstdOutOptional = \frac{1}{ \sqrt{\mathrm{Var}[x] + eps}}$$

  其中，E[x]表示输入的均值，Var[x]表示输入的方差。

函数原型

每个算子分为，必须先调用“aclnnFastLayerNormGetWorkspaceSize”接口获取计算所需workspace大小以及包含了算子计算流程的执行器，再调用“aclnnFastLayerNorm”接口执行计算。

aclnnFastLayerNormGetWorkspaceSize

• 参数说明：

  [object Object]

• 返回值：

  aclnnStatus：返回状态码，具体参见。

  第一段接口完成入参校验，出现以下场景时报错：

  [object Object]

aclnnFastLayerNorm

• 参数说明：

  [object Object]

• 返回值：

  aclnnStatus：返回状态码，具体参见。

约束说明

• input、normalizedShape、weightOptional（非空时）、biasOptional（非空时）、out、meanOutOptional（非空时）或rstdOutOptional（非空时）的shape不超过8维。
• 确定性计算：
  • aclnnFastLayerNorm默认确定性实现。

调用示例

示例代码如下，仅供参考，具体编译和执行过程请参考。