aclnnInplaceScatterUpdate
支持的产品型号
- [object Object]Atlas 训练系列产品[object Object]。
- [object Object]Atlas A2 训练系列产品/Atlas 800I A2 推理产品[object Object]。
接口原型
每个算子分为undefined,必须先调用“aclnnInplaceScatterUpdateGetWorkspaceSize”接口获取计算所需workspace大小以及包含了算子计算流程的执行器,再调用“aclnnInplaceScatterUpdate”接口执行计算。
aclnnStatus aclnnInplaceScatterUpdateGetWorkspaceSize(aclTensor *data, const aclTensor *indices, const aclTensor *updates, int64_t axis, uint64_t *workspaceSize, aclOpExecutor **executor)
aclnnStatus aclnnInplaceScatterUpdate(void *workspace, uint64_t workspaceSize, aclOpExecutor *executor, aclrtStream stream)
功能描述
算子功能: 将tensor updates中的值按指定的轴axis和索引indices逐个更新tensor data中的值。该算子为自定义算子语义,无对应的tensorflow或pytorch接口。
示例: 该算子有3个输入和一个属性:data、update、indices和axis,其中data是待更新的tensor,update是存储更新数据的tensor,indices表示更新位置, axis是指定的更新维度。当indices为1维,存在以下两种场景:
场景一: indices为1维,axis指定更新的维度shape为1, indices指定的是每个batch维度(最高维)在axis维度的偏移。
[object Object][object Object]场景二: indices为1维,axis指定更新的维度shape大于1, indices指定的是每个batch维度(最高维)在axis维度的偏移。
[object Object][object Object]
aclnnInplaceScatterUpdateGetWorkspaceSize
参数说明:
- data(aclTensor*, 计算输入|计算输出):数据类型支持INT8、FLOAT16、FLOAT32、INT32、BFLOAT16(仅[object Object]Atlas A2 训练系列产品/Atlas 800I A2 推理产品[object Object]支持)类型。data只支持2-8维,且维度数需要与updates一致。支持undefined。数据格式支持ND。不支持空Tensor。
- indices(aclTensor*, 计算输入):数据类型支持INT32, INT64。目前仅支持一维跟二维。支持undefined。数据格式支持ND。不支持空Tensor。indices中的索引数据不支持越界。
- updates(aclTensor*, 计算输入):数据类型支持INT8、FLOAT16、FLOAT32、INT32、BFLOAT16(仅[object Object]Atlas A2 训练系列产品/Atlas 800I A2 推理产品[object Object]支持)类型。数据类型需要与data的数据类型相同,shape的维度数需要与data shape的维度数相同。支持undefined。数据格式支持ND。不支持空Tensor。
- axis(int64_t, 计算输入):用来scatter的维度,数据类型为INT64,取值范围为[-data_rank, data_rank)(data_rank为data的维度数),且axis不能为0。
- workspaceSize(uint64_t *,出参):返回需要在Device侧申请的workspace大小。
- executor(aclOpExecutor **,出参):返回op执行器,包含了算子计算流程。
返回值: aclnnStatus:返回状态码,具体参见undefined。
[object Object]
aclnnInplaceScatterUpdate
参数说明:
- workspace(void*,入参):在Device侧申请的workspace内存地址。
- workspaceSize(uint64_t,入参):在Device侧申请的workspace大小,由第一段接口aclnnInplaceScatterUpdateGetWorkspaceSize获取。
- executor(aclOpExecutor *,入参):op执行器,包含了算子计算流程。
- stream(aclrtStream,入参):指定执行任务的AscendCL Stream流。
返回值: aclnnStatus:返回状态码,具体参见undefined。
约束与限制
- 支持float16, float32, int8, int32, bfloat16。
- data与updates的维度数一致。
- indices的数据类型为int32或int64。
- 支持ND格式。
- 不支持索引越界,索引越界不校验。
- updates shape的0轴与indices shape的0轴一致。
- updates shape的0轴小于等于data shape的0轴。
- updates与data的shape,除axis轴和0轴以外,其余轴的shape均相同。
- 当indices shape为二维时,shape的1轴需要等于2。
- indices数据类型为INT32时,DtypeSize=4,为INT64时,DtypeSize=8,IndicesShapeSize为indices的shape乘积,需要使用的ub = IndicesShapeSize * DtypeSize + 224,当ub大于对应可以获取到的AI处理器版本总ub大小时,不支持。
调用示例
仅供参考,具体编译和执行过程请参考undefined。
[object Object]