跳到正文
LMSYS Blog·· 9 天前精选AI 评分71

SGLang 披露并修复 PD 分离服务中的跨请求 KVCache 竞态问题

SGLang security update: improving request isolation

AI 导读

SGLang 团队与 Cloudflare 协调披露 2026 年 8 月 27 日至 9 月 9 日影响 Workers AI 上 @cf/zai-org/glm-5.3 的跨请求 KVCache 暴露问题。

推荐理由

SGLang 团队复盘了异步 KVCache 传输中的跨请求泄漏机制、复现方法和修复方案,对运维长上下文 PD 部署有直接指导意义。

来源:LMSYS Blog · lmsys.org