昇腾社区首页
中文
注册
开发者
下载

aclnnDequantBias

产品支持情况

[object Object]undefined

功能说明

  • 算子功能:对输入x反量化操作,将输入的INT32的数据转化为FLOAT16/BFLOAT16输出。
  • 计算公式:y=A×weight_scale×activate_scaley = A \times \text{weight\_scale} \times \text{activate\_scale} y=(A+bias)×weight_scale×activate_scaley = (A + \text{bias}) \times \text{weight\_scale} \times \text{activate\_scale} y=A×weight_scale×activate_scale+biasy = A \times \text{weight\_scale} \times \text{activate\_scale} + \text{bias}

函数原型

每个算子分为,必须先调用“aclnnDequantBiasGetWorkspaceSize”接口获取入参并根据流程计算所需workspace大小,再调用“aclnnDequantBias”接口执行计算。

  • [object Object]
  • [object Object]

aclnnDequantBiasGetWorkspaceSize

  • 参数说明:

    • x(aclTensor*,计算输入):公式中的输入[object Object],表示反量化操作的输入tensor,Device侧的aclTensor,shape为[M,N],数据类型支持INT32。不支持支持ND。支持空Tensor。
    • weightScale(aclTensor*,计算输入):公式中的输入[object Object],表示反量化操作输入N维度上乘法的权重,Device侧的aclTensor,shape为[N],长度与x的N维长度一致,数据类型支持FLOAT,BFLOAT16。不支持支持ND。支持空Tensor。
    • activateScaleOptional(aclTensor*,计算输入):公式中的输入[object Object],表示反量化操作输入M维度上乘法的权重,Device侧的aclTensor,shape为[M],长度与x的M维长度一致,数据类型支持FLOAT。不支持支持ND。支持空Tensor。
    • biasOptional(aclTensor*,计算输入):公式中的输入[object Object],表示反量化操作输入N维度上加法的权重,Device侧的aclTensor,shape为[N],长度与x的N维长度一致,数据类型支持FLOAT,BFLOAT16,FLOAT16,INT32。不支持支持ND。支持空Tensor。
    • outputDtype(uint64_t *,计算输入):数据类型为整型,表示输出out的数据类型,值为[1,27]。值为1表示输出的类型是FLOAT16,值为27表示输出的类型是BFLOAT16。当weightScale数据类型为FLOAT时,该参数配置为1;当weightScale数据类型为BFLOAT16时,该参数配置为27。支持空Tensor。
    • out(aclTensor*,计算输出):公式中的输出[object Object],表示反量化操作的输出tensor。Device侧的aclTensor,shape为[M,N],数据类型支持FLOAT16、BFLOAT16。不支持支持ND。
    • workspaceSize(uint64_t*,出参):返回需要在Device侧申请的workspace大小。
    • executor(aclOpExecutor**,出参):返回op执行器,包含了算子计算流程。
  • 返回值:

    aclnnStatus:返回状态码,具体参见

    [object Object]

aclnnDequantBias

  • 参数说明:

    • workspace(void*,入参):在Device侧申请的workspace内存地址。
    • workspaceSize(uint64_t,入参):在Device侧申请的workspace大小,由第一段接口aclnnDequantBiasGetWorkspaceSize获取。
    • executor(aclOpExecutor*,入参):op执行器,包含了算子计算流程。
    • stream(aclrtStream,入参):指定执行任务的Stream。
  • 返回值:

    aclnnStatus:返回状态码,具体参见

约束说明

输入和输出参数中shape的N和M必须是正整数,且M的取值小于等于25000。

调用示例

示例代码如下,仅供参考,具体编译和执行过程请参考

[object Object]