昇腾社区首页
中文
注册

aclnnAddr&aclnnInplaceAddr

支持的产品型号

  • Atlas 训练系列产品。
  • Atlas A2训练系列产品/Atlas 800I A2推理产品。

接口原型

  • aclnnAddr和aclnnInplaceAddr实现相同的功能,使用区别如下,请根据自身实际场景选择合适的算子。

    • aclnnAddr:需新建一个输出张量对象存储计算结果。
    • aclnnInplaceAddr:无需新建输出张量对象,直接在输入张量的内存中存储计算结果。
  • 每个算子分为undefined,必须先调用“aclnnAddrGetWorkspaceSize”或者“aclnnInplaceAddrGetWorkspaceSize”接口获取入参并根据流程计算所需workspace大小,再调用“aclnnAddr”或者“aclnnInplaceAddr”接口执行计算。

    • aclnnStatus aclnnAddrGetWorkspaceSize(const aclTensor *self, const aclTensor *vec1, const aclTensor *vec2, const aclScalar *betaOptional, const aclScalar *alphaOptional, aclTensor *out, uint64_t *workspaceSize, aclOpExecutor **executor)
    • aclnnStatus aclnnAddr(void *workspace, uint64_t workspaceSize, aclOpExecutor *executor, aclrtStream stream)
    • aclnnStatus aclnnInplaceAddrGetWorkspaceSize(aclTensor *selfRef, const aclTensor *vec1, const aclTensor *vec2, const aclScalar *betaOptional, const aclScalar *alphaOptional, uint64_t *workspaceSize, aclOpExecutor **executor)
    • aclnnStatus aclnnInplaceAddr(void *workspace, uint64_t workspaceSize, aclOpExecutor *executor, aclrtStream stream)

功能描述

  • 算子功能:求向量vec1和vec2的外积,并将外积结果扩展一个矩阵后输出

  • 计算公式:

    out=β self+α (vec1vec2)\text{out} = \beta\ \text{self} + \alpha\ (\text{vec1} \otimes \text{vec2})

aclnnAddrGetWorkspaceSize

  • 参数说明:

    • self(const aclTensor*, 计算输入): 外积扩展矩阵,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持),shape维度不能超过2,并且需要与vec1、vec2满足undefined, 支持undefinedundefined支持ND。
    • vec1(const aclTensor*, 计算输入): 外积入参第一向量,一维向量,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持),shape需要与self满足undefined, 支持undefinedundefined支持ND。
    • vec2(const aclTensor*, 计算输入): 外积入参第二向量,一维向量,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持),shape需要与self满足undefined, 支持undefinedundefined支持ND。
    • betaOptional(const aclScalar*, 计算输入): 外积扩展矩阵比例因子,即公式中的β,host侧的aclScalar,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持),如果betaOptional为bool类型,则self/vec1/vec2的数据类型只能是bool;undefined支持ND。
    • alphaOptional(const aclScalar*, 计算输入): 外积比例因子,即公式中的α,host侧的aclScalar,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持),如果alphaOptional为bool类型,则self/vec1/vec2的最大类型只能是bool;undefined支持ND。
    • out(aclTensor*, 计算输出): 输出结果,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、BFLOAT16、INT8、INT16、INT32、INT64、UINNT8、BOOL、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持),支持undefinedundefined支持ND。
    • workspaceSize(uint64_t*, 出参): 返回需要在Device侧申请的workspace大小。
    • executor(aclOpExecutor**, 出参): 返回op执行器,包含了算子计算流程。
  • 返回值:

    aclnnStatus: 返回状态码,具体参见undefined

    [object Object]

aclnnAddr

  • 参数说明:

    • workspace(void *, 入参): 在Device侧申请的workspace内存地址。
    • workspaceSize(uint64_t, 入参): 在Device侧申请的workspace大小,由第一段接口aclnnAbsGetWorkspaceSize获取。
    • executor(aclOpExecutor *, 入参): op执行器,包含了算子计算流程。
    • stream(aclrtStream, 入参): 指定执行任务的AscendCL Stream流。
  • 返回值:

    aclnnStatus: 返回状态码,具体参见undefined

aclnnInplaceAddrGetWorkspaceSize

  • 参数说明:

    • selfRef(aclTensor*, 计算输入|计算输出): 外积扩展矩阵及输出矩阵,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL,shape需要与vec1、vec2满足undefined, 支持undefinedundefined支持ND。
    • vec1(const aclTensor*, 计算输入): 外积入参第一向量,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL,shape需要与selfRef满足undefined, 支持undefinedundefined支持ND。
    • vec2(const aclTensor*, 计算输入): 外积入参第二向量,Device侧的aclTensor,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL,shape需要与selfRef满足undefined, 支持undefinedundefined支持ND。
    • betaOptional(const aclScalar*, 计算输入): 外积扩展矩阵比例因子,即公式中的β,host侧的aclScalar,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL,如果betaOptional为bool类型,则selfRef/vec1/vec2的最大类型只能是bool;undefined支持ND。
    • alphaOptional(const aclScalar*, 计算输入): 外积比例因子,即公式中的α,host侧的aclScalar,数据类型支持FLOAT、FLOAT16、DOUBLE、INT8、INT16、INT32、INT64、UINT8、BOOL,如果alphaOptional为bool类型,则selfRef/vec1/vec2的最大类型只能是bool;undefined支持ND。
    • workspaceSize(uint64_t*, 出参): 返回需要在Device侧申请的workspace大小。
    • executor(aclOpExecutor**, 出参): 返回op执行器,包含了算子计算流程。
  • 返回值:

    aclnnStatus: 返回状态码,具体参见undefined

    [object Object]

aclnnInplaceAddr

  • 参数说明:

    • workspace(void *, 入参): 在Device侧申请的workspace内存地址。
    • workspaceSize(uint64_t, 入参): 在Device侧申请的workspace大小,由第一段接口aclnnInplaceAddrGetWorkspaceSize获取。
    • executor(aclOpExecutor *, 入参): op执行器,包含了算子计算流程。
    • stream(aclrtStream, 入参): 指定执行任务的AscendCL Stream流。
  • 返回值:

    aclnnStatus: 返回状态码,具体参见undefined

约束与限制

调用示例

示例代码如下,仅供参考,具体编译和执行过程请参考undefined

[object Object]