工具介绍与任务方法
Manifest LLM Gateway
Manifest LLM Gateway 将不同模型服务、订阅和本地模型接到同一兼容 OpenAI 的入口，提供路由、请求记录、用量观察与失败回退。
Manifest LLM Gateway 能做什么
Manifest LLM Gateway 将不同模型服务、订阅和本地模型接到同一兼容 OpenAI 的入口，提供路由、请求记录、用量观察与失败回退。
- 语言模型调用路由管理
- 智能体运行与模型调用追踪监测
如何使用 Manifest LLM Gateway
将应用请求接入统一模型网关
准备输入
- 已有模型服务凭据或本地模型
- 应用请求与希望使用的路由规则
操作步骤
- 按自托管说明启动网关，创建管理员账户并连接允许使用的模型来源。
- 将应用接入统一端点，发起样例请求，检查路由、成功或错误记录与用量。
预期交付物
- 统一模型入口及可检查的请求日志
完整请求日志可能包含业务内容，应按用途控制保留范围；失败回退后的结果仍须检查。
开始前需要了解
账号权限、费用与可用功能请以官方入口的当前说明为准。重要结果应先检查，再用于实际工作。
