aclnnAscendQuant
产品支持情况
功能说明
- 接口功能:对输入x进行量化操作,且scale和offset的size需要是x的最后一维或1。
- 计算公式:
sqrtMode为false时,计算公式为:
sqrtMode为true时,计算公式为:
函数原型
每个算子分为,必须先调用“aclnnAscendQuantGetWorkspaceSize”接口获取计算所需workspace大小以及包含了算子计算流程的执行器,再调用“aclnnAscendQuant”接口执行计算。
[object Object]
[object Object]
aclnnAscendQuantGetWorkspaceSize
参数说明:
[object Object]- [object Object]Atlas 推理系列产品[object Object]:
- 数据类型:
- 入参
[object Object]、[object Object]、[object Object]不支持BFLOAT16。 - 出参
[object Object]仅支持INT8。
- 入参
- 入参
[object Object]仅支持取值2,表示INT8。
- 数据类型:
- [object Object]Atlas 推理系列产品[object Object]:
返回值:
第一段接口完成入参校验,出现以下场景时报错:
[object Object]
aclnnAscendQuant
约束说明
- 确定性计算:
- aclnnAscendQuant默认确定性实现。
调用示例
[object Object]