aclnnInplaceScatterUpdate
支持的产品型号
- Atlas 训练系列产品。
- Atlas A2训练系列产品/Atlas 800I A2推理产品。
接口原型:
每个算子分为,必须先调用“aclnnInplaceScatterUpdateGetWorkspaceSize”接口获取计算所需workspace大小以及包含了算子计算流程的执行器,再调用“aclnnInplaceScatterUpdate”接口执行计算。
aclnnStatus aclnnInplaceScatterUpdateGetWorkspaceSize(aclTensor *data, const aclTensor *indices, const aclTensor *updates, int64_t axis, uint64_t *workspaceSize, aclOpExecutor **executor)
aclnnStatus aclnnInplaceScatterUpdate(void *workspace, uint64_t workspaceSize, aclOpExecutor *executor, aclrtStream stream)
功能描述
算子功能: 将tensor updates中的值按指定的轴axis和索引indices逐个更新tensor data中的值。该算子为自定义算子语义,无对应的tensorflow或pytorch接口。
示例: 该算子有3个输入和一个属性:data, update, indices和axis,其中data是待更新的tensor,update是存储更新数据的tensor,indices表示更新位置, axis是指定的更新维度。当indices为1维,存在以下两种场景:
场景一: indices为1维,axis指定更新的维度shape为1, indices指定的是每个batch维度(最高维)在axis维度的偏移。
[object Object][object Object]场景二: indices为1维,axis指定更新的维度shape大于1, indices指定的是每个batch维度(最高维)在axis维度的偏移。
[object Object][object Object]
aclnnInplaceScatterUpdateGetWorkspaceSize
参数说明:
- data(aclTensor*, 计算输入|计算输出):数据类型支持INT8、FLOAT16、FLOAT32、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持)类型。data只支持2-8维,且维度大小需要与updates一致。支持非连续的tensor。数据格式支持ND。不支持空Tensor。
- indices(aclTensor*, 计算输入):数据类型支持INT32, INT64。目前仅支持一维跟二维。支持非连续的tensor。数据格式支持ND。不支持空Tensor。
- updates(aclTensor*, 计算输入):数据类型支持INT8、FLOAT16、FLOAT32、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持)类型。updates的维度大小需要与data一致。支持非连续的tensor。数据格式支持ND。不支持空Tensor。
- axis(int64_t, 计算输入):用来scatter的维度,数据类型为INT64。
- workspaceSize(uint64_t *,出参):返回用户需要在Device侧申请的workspace大小。
- executor(aclOpExecutor **,出参):返回op执行器,包含了算子计算流程。
-
[object Object]
aclnnInplaceScatterUpdate
参数说明:
- workspace(void*,入参):在Device侧申请的workspace内存地址。
- workspaceSize(uint64_t*,入参):在Device侧申请的workspace大小,由第一段接口aclnnInplaceScatterUpdateGetWorkspaceSize获取。
- executor(aclOpExecutor *,入参):op执行器,包含了算子计算流程。
- stream(aclrtStream,入参):AscendCL stream流。
约束与限制
- 支持float16, float32, int8, bfloat16。
- data与updates的秩一致。
- indices的数据类型为int32或int64。
- 支持ND格式。
- 不支持索引越界,索引越界不校验。
调用示例
[object Object]