产品 |
是否支持 |
---|---|
√ |
|
x |
|
x |
|
x |
|
x |
查询KvCacheManager实例是否已初始化。
1 | is_initialized() -> bool |
NA
1 2 3 4 5 6 | from llm_datadist import LLMDataDist llm_datadist = LLMDataDist(LLMRole.Decode, 0) ... llm_datadist.init(engine_options) kv_cache_manager = llm_datadist.kv_cache_manager is_initialized = kv_cache_manager.is_initialized() |
如果LLMDataDist已初始化,则返回True。
如果LLMDataDist已销毁,则返回False。
如果该接口返回False,则不应调用KvCacheManager的任何接口。