aclnnFastGeluBackward
产品支持情况
产品 | 是否支持 |
---|---|
[object Object]Atlas A3 训练系列产品/Atlas A3 推理系列产品[object Object] | √ |
[object Object]Atlas A2 训练系列产品/Atlas 800I A2 推理产品/A200I A2 Box 异构组件[object Object] | √ |
[object Object]Atlas 200I/500 A2 推理产品[object Object] | × |
[object Object]Atlas 推理系列产品 [object Object] | × |
[object Object]Atlas 训练系列产品[object Object] | √ |
功能说明
undefined的反向计算。 FastGeluBackward定义如下: $$ dx = dy * ((\frac{1}{e^{-1.702 x}+1} - 1) * -1.702x + 1) * \frac{1}{(e^{-1.702 x}+1)} $$
函数原型
每个算子分为undefined,必须先调用“aclnnFastGeluBackwardGetWorkspaceSize”接口获取计算所需workspace大小以及包含了算子计算流程的执行器,再调用“aclnnFastGeluBackward”接口执行计算。
aclnnStatus aclnnFastGeluBackwardGetWorkspaceSize(const aclTensor *gradOutput, const aclTensor *self, aclTensor *gradInput, uint64_t *workspaceSize, aclOpExecutor **executor)
aclnnStatus aclnnFastGeluBackward(void *workspace, uint64_t workspaceSize, aclOpExecutor *executor, aclrtStream stream)
aclnnFastGeluBackwardGetWorkspaceSize
参数说明:
- gradOutput(aclTensor*, 计算输入):反向传播的梯度数据,公式中的,Device侧的aclTensor。支持undefined。undefined支持ND,且与self、gradInput的数据格式一致。shape支持0-8维,且与self、gradInput的shape一致。数据类型支持FLOAT16、FLOAT32、BFLOAT16,且与self、gradInput的数据类型一致。
- self(aclTensor*, 计算输入):表示输入张量,与正向的
self
相同,公式中的,Device侧的aclTensor。支持undefined。undefined支持ND,且与gradOutput、gradInput的数据格式一致。shape支持0-8维,且与gradOutput、gradInput的shape一致。数据类型支持FLOAT16、FLOAT32、BFLOAT16,且与gradOutput、gradInput的数据类型一致。 - gradInput(aclTensor*, 计算输出):表示输出张量,公式中的,Device侧的aclTensor。支持undefined。undefined支持ND,且与gradOutput、self的数据格式一致。shape支持0-8维,且与gradOutput、self的shape一致。数据类型支持FLOAT16、FLOAT32、BFLOAT16,且与gradOutput、self的数据类型一致。
- workspaceSize(uint64_t*, 出参): 返回需要在Device侧申请的workspace大小。
- executor(aclOpExecutor**, 出参): 返回op执行器,包含了算子计算流程。
返回值:
aclnnStatus:返回状态码,具体参见undefined。
[object Object]
aclnnFastGeluBackward
参数说明:
- workspace(void*, 入参): 在Device侧申请的workspace内存地址。
- workspaceSize(uint64_t, 入参): 在Device侧申请的workspace大小,由第一段接口aclnnFastGeluBackwardGetWorkspaceSize获取。
- executor(aclOpExecutor*, 入参): op执行器,包含了算子计算流程。
- stream(aclrtStream, 入参): 指定执行任务的Stream。
返回值:
aclnnStatus:返回状态码,具体参见undefined。
约束说明
无
调用示例
示例代码如下,仅供参考,具体编译和执行过程请参考undefined。
[object Object]