昇腾社区首页
中文
注册

aclnnInplaceScatterUpdate

支持的产品型号

  • Atlas 训练系列产品。
  • Atlas A2训练系列产品/Atlas 800I A2推理产品。

接口原型:

每个算子分为undefined,必须先调用“aclnnInplaceScatterUpdateGetWorkspaceSize”接口获取计算所需workspace大小以及包含了算子计算流程的执行器,再调用“aclnnInplaceScatterUpdate”接口执行计算。

  • aclnnStatus aclnnInplaceScatterUpdateGetWorkspaceSize(aclTensor *data, const aclTensor *indices, const aclTensor *updates, int64_t axis, uint64_t *workspaceSize, aclOpExecutor **executor)
  • aclnnStatus aclnnInplaceScatterUpdate(void *workspace, uint64_t workspaceSize, aclOpExecutor *executor, aclrtStream stream)

功能描述

  • 算子功能: 将tensor updates中的值按指定的轴axis和索引indices逐个更新tensor data中的值。该算子为自定义算子语义,无对应的tensorflow或pytorch接口。

  • 示例: 该算子有3个输入和一个属性:data, update, indices和axis,其中data是待更新的tensor,update是存储更新数据的tensor,indices表示更新位置, axis是指定的更新维度。当indices为1维,存在以下两种场景:

    场景一: indices为1维,axis指定更新的维度shape为1, indices指定的是每个batch维度(最高维)在axis维度的偏移。

    [object Object]
    [object Object]

    场景二: indices为1维,axis指定更新的维度shape大于1, indices指定的是每个batch维度(最高维)在axis维度的偏移。

    [object Object]
    [object Object]

aclnnInplaceScatterUpdateGetWorkspaceSize

  • 参数说明

    • data(aclTensor*, 计算输入|计算输出):数据类型支持INT8、FLOAT16、FLOAT32、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持)类型。data只支持2-8维,且维度数需要与updates一致。支持非连续的tensor。数据格式支持ND。不支持空Tensor。
    • indices(aclTensor*, 计算输入):数据类型支持INT32, INT64。目前仅支持一维跟二维。支持非连续的tensor。数据格式支持ND。不支持空Tensor。indices中的索引数据不支持越界。
    • updates(aclTensor*, 计算输入):数据类型支持INT8、FLOAT16、FLOAT32、BFLOAT16(仅Atlas A2训练系列产品/Atlas 800I A2推理产品支持)类型。数据类型需要与data的数据类型相同,shape的维度数需要与data shape的维度数相同。支持非连续的tensor。数据格式支持ND。不支持空Tensor。
    • axis(int64_t, 计算输入):用来scatter的维度,数据类型为INT64,取值范围为[-data_rank, data_rank)(data_rank为data的维度数),且axis不能为0。
    • workspaceSize(uint64_t *,出参):返回需要在Device侧申请的workspace大小。
    • executor(aclOpExecutor **,出参):返回op执行器,包含了算子计算流程。
  • 返回值: aclnnStatus:返回状态码,具体参见undefined

    [object Object]

aclnnInplaceScatterUpdate

  • 参数说明

    • workspace(void*,入参):在Device侧申请的workspace内存地址。
    • workspaceSize(uint64_t,入参):在Device侧申请的workspace大小,由第一段接口aclnnInplaceScatterUpdateGetWorkspaceSize获取。
    • executor(aclOpExecutor *,入参):op执行器,包含了算子计算流程。
    • stream(aclrtStream,入参):指定执行任务的 AscendCL Stream流。
  • 返回值: aclnnStatus:返回状态码,具体参见undefined

约束与限制

  1. 支持float16, float32, int8, bfloat16。
  2. data与updates的维度数一致。
  3. indices的数据类型为int32或int64。
  4. 支持ND格式。
  5. 不支持索引越界,索引越界不校验。
  6. updates shape的0轴与indices shape的0轴一致。
  7. updates shape的0轴小于等于data shape的0轴。
  8. updates与data的shape,除axis轴和0轴以外,其余轴的shape均相同。
  9. 当indices shape为二维时,shape的1轴需要等于2。
  10. indices数据类型为INT32时,DtypeSize=4,为INT64时,DtypeSize=8,IndicesShapeSize为indices的shape乘积,需要使用的ub = IndicesShapeSize * DtypeSize + 224,当ub大于对应可以获取到的AI处理器版本总ub大小时,不支持。

调用示例

仅供参考,具体编译和执行过程请参考undefined

[object Object]