跳转到内容

NVIDIA

NVIDIA 在 https://integrate.api.nvidia.com/v1 处为 Nemotron 和 NeMo 模型提供了兼容 OpenAI 的 API。使用来自 NVIDIA NGC 的 API 密钥进行身份验证。

导出密钥一次,然后运行入职流程并设置一个 NVIDIA 模型:

Terminal window
export NVIDIA_API_KEY="nvapi-..."
openclaw onboard --auth-choice skip
openclaw models set nvidia/nvidia/llama-3.1-nemotron-70b-instruct

如果您仍然传递 --token,请记住它会保存在 Shell 历史记录和 ps 输出中;尽可能使用环境变量。

{
env: { NVIDIA_API_KEY: "nvapi-..." },
models: {
providers: {
nvidia: {
baseUrl: "https://integrate.api.nvidia.com/v1",
api: "openai-completions",
},
},
},
agents: {
defaults: {
model: { primary: "nvidia/nvidia/llama-3.1-nemotron-70b-instruct" },
},
},
}
  • nvidia/llama-3.1-nemotron-70b-instruct(默认)
  • meta/llama-3.3-70b-instruct
  • nvidia/mistral-nemo-minitron-8b-8k-instruct
  • 兼容 OpenAI 的 /v1 端点;使用来自 NVIDIA NGC 的 API 密钥。
  • 当设置 NVIDIA_API_KEY 时,提供商会自动启用;使用静态默认值(131,072 令牌上下文窗口,4,096 最大令牌数)。