aclnnGluBackward
产品支持情况
产品 | 是否支持 |
---|---|
[object Object]Atlas A3 训练系列产品/Atlas A3 推理系列产品[object Object] | √ |
[object Object]Atlas A2 训练系列产品/Atlas 800I A2 推理产品/A200I A2 Box 异构组件[object Object] | √ |
[object Object]Atlas 200I/500 A2 推理产品[object Object] | × |
[object Object]Atlas 推理系列产品 [object Object] | √ |
[object Object]Atlas 训练系列产品[object Object] | √ |
功能说明
算子功能:GLU的反向。
计算公式:
数学计算表达式:
假设输出的GLUGrad有两部分组成:out=[a_grad, b_grad],则: sig_b = sigmoid(b) a_grad = y_grad * sig_b b_grad = a_grad * (a - a * sig_b) 其中:y_grad为gradOut,a表示的是输入张量根据指定dim进行均分后的前部分张量,b表示后半部分张量。
函数原型
每个算子分为undefined,必须先调用“aclnnGluBackwardGetWorkspaceSize”接口获取计算所需workspace大小以及包含了算子计算流程的执行器,再调用“aclnnGluBackward”接口执行计算。
aclnnStatus aclnnGluBackwardGetWorkspaceSize(const aclTensor *gradOut, const aclTensor *self, int64_t dim, const aclTensor *out, uint64_t *workspaceSize, aclOpExecutor **executor)
aclnnStatus aclnnGluBackward(void *workspace, uint64_t workspaceSize, aclOpExecutor *executor, aclrtStream stream)
aclnnGluBackwardGetWorkspaceSize
参数说明:
- gradOut(aclTensor*,计算输入):表示梯度更新系数,公式中的
y_grad
,Device侧的aclTensor,数据类型必须与self的数据类型一致,shape为其中表示self中对应维度,,支持undefined,undefined支持ND。支持空Tensor。- [object Object]Atlas 推理系列产品[object Object]、[object Object]Atlas 训练系列产品[object Object]:数据类型支持DOUBLE、FLOAT、FLOAT16。
- [object Object]Atlas A2 训练系列产品/Atlas 800I A2 推理产品/A200I A2 Box 异构组件[object Object]、[object Object]Atlas A3 训练系列产品/Atlas A3 推理系列产品[object Object]:数据类型支持DOUBLE、FLOAT、FLOAT16、BFLOAT16。
- self(aclTensor*,计算输入):待进行GluBackward计算的入参,Device侧的aclTensor,tensor的维度必须大于0,且shape必须在入参dim对应的维度上可以整除2,shape表示为其中表示任何数量的附加维,表示dim指定的维度大小,支持undefined,undefined支持ND。
- [object Object]Atlas 推理系列产品[object Object]、[object Object]Atlas 训练系列产品[object Object]:数据类型支持DOUBLE、FLOAT、FLOAT16。
- [object Object]Atlas A2 训练系列产品/Atlas 800I A2 推理产品/A200I A2 Box 异构组件[object Object]、[object Object]Atlas A3 训练系列产品/Atlas A3 推理系列产品[object Object]:数据类型支持DOUBLE、FLOAT、FLOAT16、BFLOAT16。
- dim(int64_t,计算输入):表示要拆分输入self的维度,数据类型支持INT64,取值范围[-self.dim,self.dim-1]。
- out(aclTensor*,计算输出):数据类型必须与self的数据类型一致,shape必须与self的shape一致,支持undefined,undefined支持ND。
- [object Object]Atlas 推理系列产品[object Object]、[object Object]Atlas 训练系列产品[object Object]:数据类型支持DOUBLE、FLOAT、FLOAT16。
- [object Object]Atlas A2 训练系列产品/Atlas 800I A2 推理产品/A200I A2 Box 异构组件[object Object]、[object Object]Atlas A3 训练系列产品/Atlas A3 推理系列产品[object Object]:数据类型支持DOUBLE、FLOAT、FLOAT16、BFLOAT16。
- workspaceSize(uint64_t*,出参):返回需要在Device侧申请的workspace大小。
- executor(aclOpExecutor*,出参):返回op执行器,包含了算子计算流程。
- gradOut(aclTensor*,计算输入):表示梯度更新系数,公式中的
返回值:
aclnnStatus: 返回状态码,具体参见undefined。
[object Object]
aclnnGluBackward
参数说明:
- workspace(void*,入参):在Device侧申请的workspace内存地址。
- workspaceSize(uint64_t,入参):在Device侧申请的workspace大小,由第一段接口aclnnGluBackwardGetWorkspaceSize获取。
- executor(aclOpExecutor*,入参):op执行器,包含了算子计算流程。
- stream(aclrtStream,入参):指定执行任务的Stream。
返回值:
aclnnStatus: 返回状态码,具体参见undefined。
约束说明
无。
调用示例
示例代码如下,仅供参考,具体编译和执行过程请参考undefined。
[object Object]