跳转到内容

Ollama

Ollama 是一个本地 LLM 运行时,使您可以轻松地在机器上运行开源模型。OpenClaw 与 Ollama 的 OpenAI 兼容 API 集成,并且当您使用 OLLAMA_API_KEY(或身份验证配置文件)加入并且未定义显式 models.providers.ollama 条目时,可以 自动发现支持工具的模型

  1. 安装 Ollama: https://ollama.ai

  2. 拉取模型:

Terminal window
ollama pull llama3.3
# 或
ollama pull qwen2.5-coder:32b
# 或
ollama pull deepseek-r1:32b
  1. 为 OpenClaw 启用 Ollama(任何值都可以;Ollama 不需要真正的密钥):
Terminal window
# 设置环境变量
export OLLAMA_API_KEY="ollama-local"
# 或在您的配置文件中配置
openclaw config set models.providers.ollama.apiKey "ollama-local"
  1. 使用 Ollama 模型:
{
agents: {
defaults: {
model: { primary: "ollama/llama3.3" },
},
},
}

当您设置 OLLAMA_API_KEY(或身份验证配置文件)并且 定义 models.providers.ollama 时,OpenClaw 会从 http://127.0.0.1:11434 的本地 Ollama 实例中发现模型:

  • 查询 /api/tags/api/show
  • 仅保留报告 tools 能力的模型
  • 当模型报告 thinking 时标记 reasoning
  • 可用时从 model_info["<arch>.context_length"] 读取 contextWindow
  • maxTokens 设置为上下文窗口的 10 倍
  • 将所有成本设置为 0

这避免了手动输入模型条目,同时保持目录与 Ollama 的能力一致。

要查看可用模型:

Terminal window
ollama list
openclaw models list

要添加新模型,只需使用 Ollama 拉取它:

Terminal window
ollama pull mistral

新模型将被自动发现并可供使用。

如果您显式设置 models.providers.ollama,则会跳过自动发现,您必须手动定义模型(见下文)。

启用 Ollama 最简单的方法是通过环境变量:

Terminal window
export OLLAMA_API_KEY="ollama-local"

在以下情况下使用显式配置:

  • Ollama 运行在另一个主机/端口上。
  • 您想强制使用特定的上下文窗口或模型列表。
  • 您想包含不报告工具支持的模型。
{
models: {
providers: {
ollama: {
// 使用包含 /v1 的主机用于 OpenAI 兼容 API
baseUrl: "http://ollama-host:11434/v1",
apiKey: "ollama-local",
api: "openai-completions",
models: [
{
id: "llama3.3",
name: "Llama 3.3",
reasoning: false,
input: ["text"],
cost: { input: 0, output: 0, cacheRead: 0, cacheWrite: 0 },
contextWindow: 8192,
maxTokens: 8192 * 10
}
]
}
}
}
}

如果设置了 OLLAMA_API_KEY,您可以在提供商条目中省略 apiKey,OpenClaw 将填充它以进行可用性检查。

如果 Ollama 运行在不同的主机或端口上(显式配置会禁用自动发现,因此请手动定义模型):

{
models: {
providers: {
ollama: {
apiKey: "ollama-local",
baseUrl: "http://ollama-host:11434/v1",
},
},
},
}

配置完成后,您的所有 Ollama 模型均可用:

{
agents: {
defaults: {
model: {
primary: "ollama/llama3.3",
fallback: ["ollama/qwen2.5-coder:32b"],
},
},
},
}

当 Ollama 在 /api/show 中报告 thinking 时,OpenClaw 会将模型标记为具备推理能力:

Terminal window
ollama pull deepseek-r1:32b

Ollama 是免费的并在本地运行,因此所有模型成本均设置为 $0。

对于自动发现的模型,OpenClaw 使用 Ollama 报告的上下文窗口(如果可用),否则默认为 8192。您可以在显式提供商配置中覆盖 contextWindowmaxTokens

确保 Ollama 正在运行,并且您设置了 OLLAMA_API_KEY(或身份验证配置文件),并且您 定义显式的 models.providers.ollama 条目:

Terminal window
ollama serve

并且 API 可访问:

Terminal window
curl http://localhost:11434/api/tags

OpenClaw 仅自动发现报告工具支持的模型。如果您的模型未列出,要么:

  • 拉取一个支持工具的模型,要么
  • models.providers.ollama 中显式定义模型。

添加模型:

Terminal window
ollama list # 查看已安装的模型
ollama pull llama3.3 # 拉取模型

检查 Ollama 是否在正确的端口上运行:

Terminal window
# 检查 Ollama 是否正在运行
ps aux | grep ollama
# 或重启 Ollama
ollama serve