边缘大模型网关（AI Gateway，简称“大模型网关”）允许您通过一个 API 接口访问多家大模型提供商的模型与智能体。大模型网关部署在遍布全球的边缘计算节点上，使端侧应用能够就近接入，显著提高模型访问速度；内置语义缓存机制，减少模型调用请求的回源次数，为终端用户提供更快速、更可靠的 AI 服务体验。

下图是边缘大模型网关的服务架构图。

服务优势

• 接口标准化：与 OpenAI 的 API 和 SDK 完全兼容，方便集成，降低适配成本。
• 多种大模型：支持请求15+大模型提供商的大模型与智能体。
• 边缘缓存：利用边缘缓存机制响应用户请求，节省服务调用成本。
• 就近访问：将端侧请求路由到网络延时最低的边缘节点，加速服务响应，提升服务质量。
• 场景化方案：平台预置多领域 AI 智能体，提供一站式 AI 服务调用能力。
• 故障转移：支持请求自动重试与模型调用顺序配置，保障服务稳定性。

支持的调用渠道

关于大模型网关支持的所有模型、智能体，请参见支持的调用渠道。

使用说明

大模型网关目前处于免费测试阶段，向所有用户开放。

• 关于使用条件和免费额度的具体说明，请参见使用说明。
• 若您满足使用条件，即可参考开始使用大模型网关进行使用。