STORY · 事件已收束

LMSYS 提出 Unified Radix Cache

1 个精选信源 · 1 篇报道持续 1最新动态 24天前
最新进展

统一 Radix 缓存:为混合模型前缀缓存构建单一树结构

TIMELINE

报道时间线

1 条公开报道 · 官方一手 1 条 · 最新在前
  1. 统一 Radix 缓存:为混合模型前缀缓存构建单一树结构
    LMSYS:Blog(Chatbot Arena 团队)官方一手精选

    LMSYS 团队提出 Unified Radix Cache,用单一 token 键控 radix 拓扑统一管理混合模型的 FULL、SWA 和 MAMBA 组件缓存,各组件独立执行路径、滑动窗口和检查点复用语义。