字节论文揭示 DeepSeek V4 分块 KV Cache 压缩的相位敏感性盲区
字节发现 DeepSeek 隐藏 Bug,加点空格,模型翻车
阅读原文
本站未展示全文,请前往来源网站阅读。
AI 导读
字节团队论文指出 DeepSeek V4 系列因分块 KV Cache 压缩存在相位敏感性,仅改变装饰字符数量就能让补全任务错误率在 71.3% 与 91.5% 正确率间周期性波动。
推荐理由
论文用多组对照实验说明分块 KV Cache 压缩的周期性盲区源于结构缺陷,并梳理动态分块等可行改进方向。
来源:AI科技评论 · 微信公众号 · mp.weixin.qq.com