开发者
资源

SetSingleShape

产品支持情况

产品

是否支持

Atlas 350 加速卡

Atlas A3 训练系列产品/Atlas A3 推理系列产品

Atlas A2 训练系列产品/Atlas A2 推理系列产品

Atlas 200I/500 A2 推理产品

Atlas 推理系列产品AI Core

Atlas 推理系列产品Vector Core

x

Atlas 训练系列产品

x

功能说明

设置Matmul单核计算的形状singleCoreM、singleCoreN、singleCoreK,单位为元素。用于运行时修改shape,比如复用Matmul对象来处理尾块。与SetTail接口功能一致,建议使用本接口。

函数原型

1
__aicore__ inline void SetSingleShape(int singleM, int singleN, int singleK)

参数说明

表1 参数说明

参数名

输入/输出

描述

singleM

输入

设置的singleCoreM大小,单位为元素。

singleN

输入

设置的singleCoreN大小,单位为元素。

singleK

输入

设置的singleCoreK大小,单位为元素。

返回值说明

约束说明

调用示例

 1
 2
 3
 4
 5
 6
 7
 8
 9
10
11
12
13
14
15
REGIST_MATMUL_OBJ(&pipe, GetSysWorkSpacePtr(), mm, &tiling);

// tailM:M方向上剩余元素个数,tailN:N方向上剩余元素个数,tailK:K方向上剩余元素个数
// 如果是尾核,剩余元素可能会少于单核需要计算的元素。此时,需要使用SetSingleShape重新设置本次计算的元素个数
if (tailM < tiling.singleCoreM || tailN < tiling.singleCoreN || tailK < tiling.singleCoreK) {
    matmulObj.SetSingleShape(tailM, tailN, tailK);
}

mm.SetTensorA(gm_a);
mm.SetTensorB(gm_b);
if (tiling.isBias) {
    mm.SetBias(gmBias);
}
mm.IterateAll(gm_c);
mm.End();