aclnnAddr&aclnnInplaceAddr
支持的产品型号
- Atlas 训练系列产品。
- Atlas A2训练系列产品/Atlas 800I A2推理产品。
接口原型
aclnnAddr和aclnnInplaceAddr实现相同的功能,使用区别如下,请根据自身实际场景选择合适的算子。
- aclnnAddr:需新建一个输出张量对象存储计算结果。
- aclnnInplaceAddr:无需新建输出张量对象,直接在输入张量的内存中存储计算结果。
每个算子分为undefined,必须先调用“aclnnAddrGetWorkspaceSize”或者“aclnnInplaceAddrGetWorkspaceSize”接口获取入参并根据流程计算所需workspace大小,再调用“aclnnAddr”或者“aclnnInplaceAddr”接口执行计算。
aclnnStatus aclnnAddrGetWorkspaceSize(const aclTensor *self, const aclTensor *vec1, const aclTensor *vec2, const aclScalar *betaOptional, const aclScalar *alphaOptional, aclTensor *out, uint64_t *workspaceSize, aclOpExecutor **executor)
aclnnStatus aclnnAddr(void *workspace, uint64_t workspaceSize, aclOpExecutor *executor, aclrtStream stream)
aclnnStatus aclnnInplaceAddrGetWorkspaceSize(aclTensor *selfRef, const aclTensor *vec1, const aclTensor *vec2, const aclScalar *betaOptional, const aclScalar *alphaOptional, uint64_t *workspaceSize, aclOpExecutor **executor)
aclnnStatus aclnnInplaceAddr(void *workspace, uint64_t workspaceSize, aclOpExecutor *executor, aclrtStream stream)
功能描述
算子功能:求向量vec1和vec2的外积,并将外积结果扩展一个矩阵后输出
计算公式:
aclnnAddrGetWorkspaceSize
参数说明:
- self(const aclTensor*, 计算输入): 外积扩展矩阵,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持),shape维度不能超过2,并且需要与vec1、vec2满足undefined, 支持undefined,undefined支持ND。
- vec1(const aclTensor*, 计算输入): 外积入参第一向量,一维向量,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持),shape需要与self满足undefined, 支持undefined,undefined支持ND。
- vec2(const aclTensor*, 计算输入): 外积入参第二向量,一维向量,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持),shape需要与self满足undefined, 支持undefined,undefined支持ND。
- betaOptional(const aclScalar*, 计算输入): 外积扩展矩阵比例因子,即公式中的β,host侧的aclScalar,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持),如果betaOptional为bool类型,则self/vec1/vec2的数据类型只能是bool;undefined支持ND。
- alphaOptional(const aclScalar*, 计算输入): 外积比例因子,即公式中的α,host侧的aclScalar,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持),如果alphaOptional为bool类型,则self/vec1/vec2的最大类型只能是bool;undefined支持ND。
- out(aclTensor*, 计算输出): 输出结果,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、BFLOAT16、INT8、INT16、INT32、INT64、UINNT8、BOOL、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持),支持undefined,undefined支持ND。
- workspaceSize(uint64_t*, 出参): 返回需要在Device侧申请的workspace大小。
- executor(aclOpExecutor**, 出参): 返回op执行器,包含了算子计算流程。
返回值:
aclnnStatus: 返回状态码,具体参见undefined。
[object Object]
aclnnAddr
参数说明:
- workspace(void *, 入参): 在Device侧申请的workspace内存地址。
- workspaceSize(uint64_t, 入参): 在Device侧申请的workspace大小,由第一段接口aclnnAbsGetWorkspaceSize获取。
- executor(aclOpExecutor *, 入参): op执行器,包含了算子计算流程。
- stream(aclrtStream, 入参): 指定执行任务的AscendCL Stream流。
返回值:
aclnnStatus: 返回状态码,具体参见undefined。
aclnnInplaceAddrGetWorkspaceSize
参数说明:
- selfRef(aclTensor*, 计算输入|计算输出): 外积扩展矩阵及输出矩阵,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL,shape需要与vec1、vec2满足undefined, 支持undefined,undefined支持ND。
- vec1(const aclTensor*, 计算输入): 外积入参第一向量,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL,shape需要与selfRef满足undefined, 支持undefined,undefined支持ND。
- vec2(const aclTensor*, 计算输入): 外积入参第二向量,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL,shape需要与selfRef满足undefined, 支持undefined,undefined支持ND。
- betaOptional(const aclScalar*, 计算输入): 外积扩展矩阵比例因子,即公式中的β,host侧的aclScalar,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL,如果betaOptional为bool类型,则selfRef/vec1/vec2的最大类型只能是bool;undefined支持ND。
- alphaOptional(const aclScalar*, 计算输入): 外积比例因子,即公式中的α,host侧的aclScalar,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL,如果alphaOptional为bool类型,则selfRef/vec1/vec2的最大类型只能是bool;undefined支持ND。
- workspaceSize(uint64_t*, 出参): 返回需要在Device侧申请的workspace大小。
- executor(aclOpExecutor**, 出参): 返回op执行器,包含了算子计算流程。
返回值:
aclnnStatus: 返回状态码,具体参见undefined。
[object Object]
aclnnInplaceAddr
参数说明:
- workspace(void *, 入参): 在Device侧申请的workspace内存地址。
- workspaceSize(uint64_t, 入参): 在Device侧申请的workspace大小,由第一段接口aclnnInplaceAddrGetWorkspaceSize获取。
- executor(aclOpExecutor *, 入参): op执行器,包含了算子计算流程。
- stream(aclrtStream, 入参): 指定执行任务的AscendCL Stream流。
返回值:
aclnnStatus: 返回状态码,具体参见undefined。
约束与限制
无
调用示例
示例代码如下,仅供参考,具体编译和执行过程请参考undefined。
[object Object]