昇腾社区首页
中文
注册
开发者
下载

aclnnMatmulWeightNz

产品支持情况

[object Object]undefined

功能说明

  • 接口功能:完成张量self与张量mat2的矩阵乘计算,mat2仅支持AI处理器亲和数据排布格式,只支持self为2维, mat2为4维。 相似接口有aclnnMatmul(mat2仅支持ND) aclnnMm(支持2维Tensor作为输入的矩阵乘)和aclnnBatchMatmul(仅支持3维的矩阵乘,其中第1维为batch)。
  • 计算公式:result=self@mat2result=self @ mat2

函数原型

每个算子分为,必须先调用“aclnnMatmulWeightNzGetWorkspaceSize”接口获取计算所需workspace大小以及包含了算子计算流程的执行器,再调用“aclnnMatmulWeightNz”接口执行计算。

[object Object]
[object Object]

aclnnMatmulWeightNzGetWorkspaceSize

  • 参数说明:

    [object Object]
    • [object Object]Atlas A2 训练系列产品/Atlas A2 推理系列产品[object Object]、[object Object]Atlas A3 训练系列产品/Atlas A3 推理系列产品[object Object]:
      • 调用此接口之前,必须使用aclnnTransMatmulWeight接口完成mat2的原始输入Format从ND到AI处理器亲和数据排布格式的转换。
  • 返回值:

    aclnnStatus:返回状态码,具体参见

    第一段接口完成入参校验,出现以下场景时报错:

    [object Object]

aclnnMatmulWeightNz

  • 参数说明:

    [object Object]
  • 返回值:

    aclnnStatus:返回状态码,具体参见

约束说明

  • 确定性说明:
    • [object Object]Atlas 训练系列产品[object Object]、[object Object]Atlas 推理系列产品[object Object]:aclnnMatmulWeightNz默认确定性实现。
  • 不支持两个输入分别为BFLOAT16和FLOAT16的数据类型推导。
  • self只支持2维, mat2只支持AI处理器亲和数据排布格式(NZ),调用此接口之前,必须完成mat2从ND到AI处理器亲和数据排布格式的转换。
  • 当mat2任意一个维度为1,且mat2为非连续的NZ格式时,不保证精度和功能, 即不支持k=1或者n=1时,mat2先转NZ后再对tensor的shape做任何操作处理, 如transpose操作。

调用示例

  • [object Object]Atlas A2 训练系列产品/Atlas A2 推理系列产品[object Object]、[object Object]Atlas A3 训练系列产品/Atlas A3 推理系列产品[object Object]: self和mat2数据类型为float16,mat2为AI处理器亲和数据排布格式场景下的示例代码如下,仅供参考,具体编译和执行过程请参考

    [object Object]