-
小米公开 MiMo-V3 核心架构 HySparse2:面向长程多轮 Agent 优化推理效率
HySparse2 通过两级 KV 共享、token 级稀疏选择和 Prefill 提前退出,让百万 token 下 Prefill 计算降至 Hybrid SWA 的 1/5,KV Cache 从 12GB 降至 2.7GB,同时长文检索能···
AI资讯2026-09-24AI资讯
微信客服
HySparse2 通过两级 KV 共享、token 级稀疏选择和 Prefill 提前退出,让百万 token 下 Prefill 计算降至 Hybrid SWA 的 1/5,KV Cache 从 12GB 降至 2.7GB,同时长文检索能···