GetPromptLength

产品支持情况

产品	是否支持
Atlas A3 训练系列产品/Atlas A3 推理系列产品	√
Atlas 800I A2 推理产品/A200I A2 Box 异构组件	√
Atlas A2 训练系列产品	x
Atlas 200I/500 A2 推理产品	x
Atlas 推理系列产品	x
Atlas 训练系列产品	x

函数功能

获取LLM执行请求的全量实际句子长度。

函数原型

uint64_t GetPromptLength() const

参数说明

无

返回值

实际句子长度

异常处理

无

约束说明

无

父主题： LLMReq