昇腾社区首页
中文
注册
开发者
下载

aclnnScaledMaskedSoftmax

产品支持情况

[object Object]undefined

功能说明

  • 接口功能:将输入的数据x先进行scale缩放和mask,然后执行softmax的输出。
  • 计算公式:y=Softmax((scalex)mask,dim=1)y = Softmax((scale * x) * mask, dim = -1) Softmax(Xi)=eXimax(X,dim=1)eXimax(X,dim=1)Softmax(X_i) ={e^{X_i - max(X, dim=-1)} \over \sum{e^{X_i - max(X, dim=-1)}}}

函数原型

每个算子分为,必须先调用“aclnnScaledMaskedSoftmaxGetWorkspaceSize”接口获取计算所需workspace大小以及包含了算子计算流程的执行器,再调用“aclnnScaledMaskedSoftmax”接口执行计算。

[object Object]
[object Object]

aclnnScaledMaskedSoftmaxGetWorkspaceSize

  • 参数说明

    [object Object]
  • 返回值

    aclnnStatus:返回状态码,具体参见

    第一段接口完成入参校验,出现以下场景时报错:

    [object Object]

aclnnScaledMaskedSoftmax

  • 参数说明

    [object Object]
  • 返回值:

    aclnnStatus:返回状态码,具体参见

约束说明

  • 确定性计算:

    • aclnnScaledMaskedSoftmax默认确定性实现。
  • x的第四维需要在(0,4096](0,4096]

  • mask的shape支持前两维和x不同,但需要满足

调用示例

示例代码如下,仅供参考,具体编译和执行过程请参考

[object Object]