GetMaxPositionEmbeddings接口
接口功能
获取MaxPositionEmbeddings数值。
接口格式
uint32_t GetMaxPositionEmbeddings() const
接口参数
无。
使用样例
构造一个LlmManager实例,获取MaxPositionEmbeddings数值。
1 2 3 4 5 6 7 8 9 | mindie_llm::GetRequestsCallback getRequestCallback; mindie_llm::SendResponsesCallback sendResponsesCallback; mindie_llm::ControlSignalCallback stopSignalCallback; mindie_llm::LlmManagerStatsCallback statsCallback; mindie_llm::SendStatusResponseCallback sendStatusCallback; const std::string llmConfigPath; std::map<std::string, std::string> ipInfo; std::shared_ptr<mindie_llm::LlmManager> llmManager = std::make_shared<mindie_llm::LlmManager>(llmConfigPath, getRequestCallback, sendResponsesCallback, stopSignalCallback, statsCallback, sendStatusCallback,ipInfo); uint32_t maxPositionEmbeddings = llmManager->GetMaxPositionEmbeddings(); |
返回值
uint32_t类型的maxPositionEmbeddings数值。
父主题: LlmManager