Hermes 3 Llama 3.1 8B

NousResearch

Llama

Hermes 是 Meta 的 Llama 3.1 的微调版本,并使用人工整理的数据集和合成数据进行了进一步训练。擅长对话和代码生成。

模型信息

模型

Hermes 3 Llama 3.1 8B

作者

NousResearch

架构

Llama

参数

8B

格式

GGUF

磁盘大小

4.92 GB

下载和运行Hermes 3 Llama 3.1 8B

在 LM Studio 中打开以查看下载选项

从终端下载 hermes-3-8b

使用 lms(LM Studio 的开发者命令行界面)下载模型。

lms get hermes-3-8b
如果您还没有安装,请运行 npx lmstudio install-cli

从您的代码调用 hermes-3-8b

curl https://127.0.0.1:1234/v1/chat/completions \
  -H "Content-Type: application/json" \
  -d '{
    "model": "hermes-3-8b",
    "messages": [
      { "role": "system", "content": "Always answer in rhymes." },
      { "role": "user", "content": "Introduce yourself." }
    ],
    "temperature": 0.7,
    "max_tokens": -1,
    "stream": true
  }'

下一步:构建!🔨

了解更多