LogSoftMax Tiling

功能说明

kernel侧LogSoftMax接口的计算需要开发者预留/申请临时空间,以下接口用于在host侧获取预留/申请的最大最小临时空间大小,开发者基于此范围选择合适的空间大小,并调用LogSoftMaxTilingFunc函数获取reduceSize,splitSize等参数,作为Tiling参数传递到kernel侧使用。

函数原型

参数说明

表1 GetLogSoftMaxMaxTmpSize/GetLogSoftMaxMinTmpSize接口参数列表

接口

输入/输出

功能

srcShape

输入

输入的shape信息。

dataTypeSize

输入

算子输入的数据类型大小,单位为字节。比如算子输入的数据类型为half,此处应传入2。

isReuseSource

输入

是否复用源操作数输入的空间,与LogSoftMax接口一致。

表2 LogSoftMaxTilingFunc接口参数列表

接口

输入/输出

功能

srcShape

输入

输入的shape信息。

dataTypeSize

输入

算子输入的数据类型大小,单位为字节。比如算子输入的数据类型为half,此处应传入2。

localWorkSpaceSize

输入

输入的临时空间大小。

softmaxTiling

输出

传递到kernel侧使用的Tiling参数。

返回值说明

GetLogSoftMaxMaxTmpSize/GetLogSoftMaxMinTmpSize接口返回值为最大/最小临时空间,LogSoftMaxTilingFunc接口无返回值

约束说明

调用示例

1
2
3
4
5
6
7
8
static ge::graphStatus TilingFunc(gert::TilingContext* context)
{
     std::vector<int64_t> srcDims = {outter, inner};
     ge::Shape shape(srcDims);
     const uint32_t tmpsize = AscendC::GetLogSoftMaxMaxTmpSize(shape, dtypesize, false);
     AscendC::LogSoftMaxTilingFunc(shape, dtypesize, tmpsize, tiling.logSoftmaxTilingData);
     ...
}