昇腾社区首页
中文
注册

aclnnFastGeluBackward

产品支持情况

产品 是否支持
[object Object]Atlas A3 训练系列产品/Atlas A3 推理系列产品[object Object]
[object Object]Atlas A2 训练系列产品/Atlas 800I A2 推理产品/A200I A2 Box 异构组件[object Object]
[object Object]Atlas 200I/500 A2 推理产品[object Object] ×
[object Object]Atlas 推理系列产品 [object Object] ×
[object Object]Atlas 训练系列产品[object Object]

功能说明

undefined的反向计算。 FastGeluBackward定义如下: $$ dx = dy * ((\frac{1}{e^{-1.702 x}+1} - 1) * -1.702x + 1) * \frac{1}{(e^{-1.702 x}+1)} $$

函数原型

每个算子分为undefined,必须先调用“aclnnFastGeluBackwardGetWorkspaceSize”接口获取计算所需workspace大小以及包含了算子计算流程的执行器,再调用“aclnnFastGeluBackward”接口执行计算。

  • aclnnStatus aclnnFastGeluBackwardGetWorkspaceSize(const aclTensor *gradOutput, const aclTensor *self, aclTensor *gradInput, uint64_t *workspaceSize, aclOpExecutor **executor)
  • aclnnStatus aclnnFastGeluBackward(void *workspace, uint64_t workspaceSize, aclOpExecutor *executor, aclrtStream stream)

aclnnFastGeluBackwardGetWorkspaceSize

  • 参数说明:

    • gradOutput(aclTensor*, 计算输入):反向传播的梯度数据,公式中的dydy,Device侧的aclTensor。支持undefinedundefined支持ND,且与self、gradInput的数据格式一致。shape支持0-8维,且与self、gradInput的shape一致。数据类型支持FLOAT16、FLOAT32、BFLOAT16,且与self、gradInput的数据类型一致。
    • self(aclTensor*, 计算输入):表示输入张量,与正向的self相同,公式中的xx,Device侧的aclTensor。支持undefinedundefined支持ND,且与gradOutput、gradInput的数据格式一致。shape支持0-8维,且与gradOutput、gradInput的shape一致。数据类型支持FLOAT16、FLOAT32、BFLOAT16,且与gradOutput、gradInput的数据类型一致。
    • gradInput(aclTensor*, 计算输出):表示输出张量,公式中的dxdx,Device侧的aclTensor。支持undefinedundefined支持ND,且与gradOutput、self的数据格式一致。shape支持0-8维,且与gradOutput、self的shape一致。数据类型支持FLOAT16、FLOAT32、BFLOAT16,且与gradOutput、self的数据类型一致。
    • workspaceSize(uint64_t*, 出参): 返回需要在Device侧申请的workspace大小。
    • executor(aclOpExecutor**, 出参): 返回op执行器,包含了算子计算流程。
  • 返回值:

    aclnnStatus:返回状态码,具体参见undefined

    [object Object]

aclnnFastGeluBackward

  • 参数说明:

    • workspace(void*, 入参): 在Device侧申请的workspace内存地址。
    • workspaceSize(uint64_t, 入参): 在Device侧申请的workspace大小,由第一段接口aclnnFastGeluBackwardGetWorkspaceSize获取。
    • executor(aclOpExecutor*, 入参): op执行器,包含了算子计算流程。
    • stream(aclrtStream, 入参): 指定执行任务的Stream。
  • 返回值:

    aclnnStatus:返回状态码,具体参见undefined

约束说明

调用示例

示例代码如下,仅供参考,具体编译和执行过程请参考undefined

[object Object]