文档
您可以使用下面展示的函数和方法来遍历加载到内存中的模型。
结果为完整的 SDK 模型句柄，允许访问所有模型功能。
列出当前加载到内存中的模型
这将为您提供等同于在 CLI 中使用 lms ps 的结果。
import lmstudio as lms
all_loaded_models = lms.list_loaded_models()
llm_only = lms.list_loaded_models("llm")
embedding_only = lms.list_loaded_models("embedding")
print(all_loaded_models)
本页源码可在 GitHub 上查看