aclnnSwiGlu
支持的产品型号
- Atlas A2训练系列产品/Atlas 800I A2推理产品。
- Atlas 推理系列产品。
接口原型
每个算子分为,必须先调用“aclnnSwiGluGetWorkspaceSize”接口获取计算所需workspace大小以及包含了算子计算流程的执行器,再调用“aclnnSwiGlu”接口执行计算。
aclnnStatus aclnnSwiGluGetWorkspaceSize(const aclTensor *x, int64_t dimOptional, const aclTensor *out, uint64_t *workspaceSize, aclOpExecutor **executor)
aclnnStatus aclnnSwiGlu(void *workspace, uint64_t workspaceSize, aclOpExecutor *executor, aclrtStream stream)
功能描述
算子功能:Swish门控线性单元激活函数,实现x的SwiGlu计算。
计算公式:
out[object Object]i[object Object] = SwiGlu(x[object Object]i[object Object])=Swish(A[object Object]i[object Object])*B[object Object]i[object Object]
其中,A[object Object]i[object Object]表示x[object Object]i[object Object]的前半部分,B[object Object]i[object Object]表示x[object Object]i[object Object]的后半部分。
aclnnSwiGluGetWorkspaceSize
- 参数说明:
- x(const aclTensor*,计算输入): Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、BFLOAT16。支持,支持ND。
- dimOptional(int64_t,入参):需要进行切分的维度序号,默认-1(表示最后一维),数据类型支持INT64。
- out(const aclTensor*, 计算输出):Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品),,支持ND。
- workspaceSize(uint64_t*,出参):返回需要在Device侧申请的workspace大小。
- executor(aclOpExecutor**,出参):返回op执行器,包含了算子计算流程。
- 返回值: aclnnStatus:返回状态码,具体参见。
aclnnSwiGlu
参数说明:
- workspace(void *, 入参):在Device侧申请的workspace内存地址。
- workspaceSize(uint64_t, 入参):在Device侧申请的workspace大小,由第一段接口aclnnSwiGluGetWorkspaceSize获取。
- executor(aclOpExecutor *, 入参):op执行器,包含了算子计算流程。
- stream(aclrtStream, 入参):指定执行任务的AscendCL Stream流。
约束与限制
- Atlas 推理系列产品:不支持BFLOAT16,不支持非64字节对齐。
调用示例
[object Object]