← 所有模型

Llama 3.2 3B

•

Meta

llama

Meta 推出的新款小型 Llama 模型，针对多语言对话场景进行了优化，包括主动检索和摘要任务。

模型信息

模型

Llama 3.2 3B

作者

Meta

代码库

🤗 hugging-quants/Llama-3.2-3B-Instruct-Q8_0-GGUF↗

架构

llama

参数

3B

格式

gguf

磁盘大小

约 3.42 GB

下载和运行Llama 3.2 3B

在 LM Studio 中打开以查看下载选项

从终端下载 llama-3.2-3b

使用 lms（LM Studio 的开发者命令行界面）下载模型。

lms get llama-3.2-3b
如果您还没有安装，请运行 npx lmstudio install-cli

从您的代码调用 llama-3.2-3b

curl https://127.0.0.1:1234/v1/chat/completions \
  -H "Content-Type: application/json" \
  -d '{
    "model": "llama-3.2-3b",
    "messages": [
      { "role": "system", "content": "Always answer in rhymes." },
      { "role": "user", "content": "Introduce yourself." }
    ],
    "temperature": 0.7,
    "max_tokens": -1,
    "stream": true
  }'

下一步：构建！🔨

了解更多