Seed预印本指DeepSeek V4存KV-cache相位敏感性
先了解这件事
AI 综述
2026年10月9日,Seed团队发布预印本(arxiv.org/abs/2609.36322),报告DeepSeek V4及V4.1-Flash存在KV-cache相位敏感性:相同信息在压缩KV-cache块中的位置不同,检索难度随之不同。该压缩技术可降低内存与注意力开销,但长上下文检索准确率在不同位置间差异最多达40个百分点。作者指出平均分会掩盖这类反复出现的弱点,并强调该发现仅针对检索问题,并非解释所有已报告的模型异常。
报道时间线
10月9日
- Seed 团队预印本报告 DeepSeek V4 存在 KV-cache 相位敏感性
Seed 团队一篇预印本报告 DeepSeek V4 和 V4.1-Flash 存在相位敏感性:相同信息在压缩 KV-cache 块中的位置不同,检索难度也不同。该技术可降低内存和注意力开销,但长上下文检索准确率在不同位置间差异最多达 40 个百分点;作者指出平均分会掩盖这类反复出现的弱点,且该发现针对检索问题,并非解释所有已报告的模型异常。论文见 arxiv.org/abs/2609.36322。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。