NVIDIA
NVIDIA 在https://integrate.api.nvidia.com/v1 处为 Nemotron 和 NeMo 模型提供了兼容 OpenAI 的 API。使用来自 NVIDIA NGC 的 API 密钥进行身份验证。
CLI 设置
导出密钥一次,然后运行入职流程并设置一个 NVIDIA 模型:--token,请记住它会保存在 Shell 历史记录和 ps 输出中;尽可能使用环境变量。
配置代码片段
模型 ID
nvidia/llama-3.1-nemotron-70b-instruct(默认)meta/llama-3.3-70b-instructnvidia/mistral-nemo-minitron-8b-8k-instruct
注意事项
- 兼容 OpenAI 的
/v1端点;使用来自 NVIDIA NGC 的 API 密钥。 - 当设置
NVIDIA_API_KEY时,提供商会自动启用;使用静态默认值(131,072 令牌上下文窗口,4,096 最大令牌数)。
本页面源自 openclaw/openclaw,由 BeaversLab 翻译,遵循 MIT 协议 发布。