LMSYS 提出 Unified Radix Cache
统一 Radix 缓存:为混合模型前缀缓存构建单一树结构
TIMELINE
1 条公开报道 · 官方一手 1 条 · 最新在前报道时间线
- 统一 Radix 缓存:为混合模型前缀缓存构建单一树结构
LMSYS 团队提出 Unified Radix Cache,用单一 token 键控 radix 拓扑统一管理混合模型的 FULL、SWA 和 MAMBA 组件缓存,各组件独立执行路径、滑动窗口和检查点复用语义。
统一 Radix 缓存:为混合模型前缀缓存构建单一树结构
LMSYS 团队提出 Unified Radix Cache,用单一 token 键控 radix 拓扑统一管理混合模型的 FULL、SWA 和 MAMBA 组件缓存,各组件独立执行路径、滑动窗口和检查点复用语义。