昇腾社区首页
中文
注册

aclnnSwiGluGrad

产品支持情况

产品 是否支持
[object Object]Atlas A3 训练系列产品/Atlas A3 推理系列产品[object Object]
[object Object]Atlas A2 训练系列产品/Atlas 800I A2 推理产品/A200I A2 Box 异构组件[object Object]
[object Object]Atlas 200I/500 A2 推理产品[object Object] ×
[object Object]Atlas 推理系列产品 [object Object]
[object Object]Atlas 训练系列产品[object Object] ×

功能说明

  • 算子功能:完成undefined的反向计算,完成x的SwiGlu反向梯度计算。

  • 计算公式:

    [object Object]

函数原型

每个算子分为undefined,必须先调用“aclnnSwiGluGradGetWorkspaceSize”接口获取计算所需workspace大小以及包含了算子计算流程的执行器,再调用“aclnnSwiGluGrad”接口执行计算。

  • aclnnStatus aclnnSwiGluGradGetWorkspaceSize(const aclTensor *yGrad, const aclTensor *x, int64_t dim, const aclTensor *out, uint64_t *workspaceSize, aclOpExecutor **executor)
  • aclnnStatus aclnnSwiGluGrad(void *workspace, uint64_t workspaceSize, aclOpExecutor *executor, aclrtStream stream)

aclnnSwiGluGradGetWorkspaceSize

  • 参数说明

    • yGrad(aclTensor*,计算输入):反向传播中梯度的输入,求梯度时的权重,即为了将正向输出的tensor变为标量所相乘的权重tensor,公式中的yGrad[object Object]i[object Object],Device侧的aclTensor。数据类型与计算输入x的类型一致,shape中除dim维外,其它维的大小跟x一样,dim维的大小是x的一半,不支持undefined,不支持空Tensor。undefined支持ND。
    • x(aclTensor*,计算输入):表示待计算的数据,公式中的A和B,Device侧的aclTensor,tensor的维度必须大于0,shape中除dim维外,其它维的大小跟yGrad一样,dim维的大小是yGrad的两倍,不支持undefined,不支持空Tensor,undefined支持ND。
      • [object Object]Atlas 推理系列产品[object Object]:数据类型支持FLOAT16、FLOAT32,shape不支持非64字节对齐。
      • [object Object]Atlas A2 训练系列产品/Atlas 800I A2 推理产品/A200I A2 Box 异构组件[object Object]、[object Object]Atlas A3 训练系列产品/Atlas A3 推理系列产品[object Object]:数据类型支持BFLOAT16、FLOAT16、FLOAT32。
    • dim(int64_t,入参):需要进行切分的维度序号,Host侧的整型,数据类型支持INT64。取值范围为[-x.dim(), x.dim()-1]。
    • out(aclTensor*,计算输出):表示计算结果,公式中的out[object Object]A[object Object]和out[object Object]B[object Object]的合并, Device侧的aclTensor,数据类型与计算输入x的类型一致,shape与x一致,不支持undefinedundefined支持ND。
    • workspaceSize(uint64_t*,出参):返回需要在Device侧申请的workspace大小。
    • executor(aclOpExecutor**,出参):返回op执行器,包含了算子计算流程。
  • 返回值: aclnnStatus:返回状态码,具体参见undefined

    [object Object]

aclnnSwiGluGrad

  • 参数说明

    • workspace(void *, 入参):在Device侧申请的workspace内存地址。
    • workspaceSize(uint64_t, 入参):在Device侧申请的workspace大小,由第一段接口aclnnSwiGluGradGetWorkspaceSize获取。
    • executor(aclOpExecutor *, 入参):op执行器,包含了算子计算流程。
    • stream(aclrtStream, 入参):指定执行任务的Stream。
  • 返回值: aclnnStatus:返回状态码,具体参见undefined

约束说明

调用示例

示例代码如下,仅供参考,具体编译和执行过程请参考undefined

[object Object]