LiteLLM

LiteLLM

LiteLLM 是一個開放原始碼的 LLM 閘道，為 100 多個模型提供商提供統一的 API。透過 LiteLLM 路由 OpenClaw，以獲得集中的成本追蹤、日誌記錄，以及無需變更 OpenClAM 設定即可切換後端的靈活性。

為何將 LiteLLM 與 OpenClaw 搭配使用？

• 成本追蹤 — 確切查看 OpenClaw 在所有模型上的花費
• 模型路由 — 在 Claude、GPT-4、Gemini、Bedrock 之間切換，無需變更設定
• 虛擬金鑰 — 為 OpenClaw 建立具有花費限制的金鑰
• 日誌記錄 — 完整的請求/回應日誌以便除錯
• 故障轉移 — 當您的主要提供商停機時自動切換

快速開始

透過上架

openclaw onboard --auth-choice litellm-api-key

手動設定

1. 啟動 LiteLLM Proxy：

pip install 'litellm[proxy]'
litellm --model claude-opus-4-6

2. 將 OpenClaw 指向 LiteLLM：

export LITELLM_API_KEY="your-litellm-key"

openclaw

就這樣。OpenClaw 現在會透過 LiteLLM 路由。

設定

環境變數

export LITELLM_API_KEY="sk-litellm-key"

設定檔

{
  models: {
    providers: {
      litellm: {
        baseUrl: "http://localhost:4000",
        apiKey: "${LITELLM_API_KEY}",
        api: "openai-completions",
        models: [
          {
            id: "claude-opus-4-6",
            name: "Claude Opus 4.6",
            reasoning: true,
            input: ["text", "image"],
            contextWindow: 200000,
            maxTokens: 64000,
          },
          {
            id: "gpt-4o",
            name: "GPT-4o",
            reasoning: false,
            input: ["text", "image"],
            contextWindow: 128000,
            maxTokens: 8192,
          },
        ],
      },
    },
  },
  agents: {
    defaults: {
      model: { primary: "litellm/claude-opus-4-6" },
    },
  },
}

虛擬金鑰

為 OpenClaw 建立一個具有花費限制的專用金鑰：

curl -X POST "http://localhost:4000/key/generate" \
  -H "Authorization: Bearer $LITELLM_MASTER_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "key_alias": "openclaw",
    "max_budget": 50.00,
    "budget_duration": "monthly"
  }'

將產生的金鑰用作 LITELLM_API_KEY。

模型路由

LiteLLM 可以將模型請求路由到不同的後端。在您的 LiteLLM config.yaml 中設定：

model_list:
  - model_name: claude-opus-4-6
    litellm_params:
      model: claude-opus-4-6
      api_key: os.environ/ANTHROPIC_API_KEY

  - model_name: gpt-4o
    litellm_params:
      model: gpt-4o
      api_key: os.environ/OPENAI_API_KEY

OpenClaw 持續請求 claude-opus-4-6 — LiteLLM 負責處理路由。

查看使用量

查看 LiteLLM 的儀表板或 API：

# Key info
curl "http://localhost:4000/key/info" \
  -H "Authorization: Bearer sk-litellm-key"

# Spend logs
curl "http://localhost:4000/spend/logs" \
  -H "Authorization: Bearer $LITELLM_MASTER_KEY"

備註

• LiteLLM 預設執行於 http://localhost:4000
• OpenClaw 透過相容 OpenAI 的 /v1/chat/completions 端點進行連線
• 所有 OpenClaw 功能均可透過 LiteLLM 運作 — 無任何限制

另請參閱

• LiteLLM 文件
• 模型提供商