根据Name获取Tensor。
Status GetTensorByName(const std::string& tensorName, TensorPtr &tensor)
get_tensor_by_name(tensor_name, tensor)
参数 |
是否必选 |
说明 |
取值要求 |
---|---|---|---|
tensor_name |
是 |
tensor名字。 |
合法的string类型。 |
tensor |
是 |
获取得到的tensor。 |
合法的InferTensor类型,请参考InferTensor。 |
通过字符串name,从infer_request获取对应tensor。
1 2 3 4 | name = "INPUT_IDS" shape = np.array([1,1], dtype=np.int64) runtime_tensor = llm_manager_python.InferTensor(name, shape, llm_manager_python.InferDataType.TYPE_INT64) status = infer_request.get_tensor_by_name(name, runtime_tensor) |