跳到正文
智迹闻AuraTracer

Kong AI Gateway发布高级速率限制策略

本机阅读

发生了什么

据Kong开发者指南,Kong AI Gateway引入了“AI Rate Limiting Advanced”策略,允许用户基于Token数量而非请求数进行流量限制。该策略支持通过`total_tokens`、`prompt_tokens`、`completion_tokens`或`cost`作为统计维度,并提供`sliding`、`fixed`及`calendar`三种窗口类型。用户可配置`local`、`redis`或`cluster`策略以管理计数器,其中`local`策略适用于单节点部署。

报道与来源

1 篇

发布方数量不等于独立核验数量。同稿的多个入口保留在对应报道中。

  1. konghq.com来源报道

    The Developer Guide for Setting Up the AI Gateway

来源关系与证据边界

按已记录的来源角色展示;连线仅表示原生身份流程确认的同稿入口,不表示独立佐证或跨报道引用。

  1. 来源报道1 个发布入口