IT之家·· 3 小时前
字节 Seed 团队发现 DeepSeek 长上下文性能漂移原因
字节 Seed 团队发现 DeepSeek“抽风”原因,长上下文可能性能漂移
SI 导读
字节 Seed 团队在 arXiv 发表论文,指出分块 KV 缓存压缩引入的“相位敏感性”是 DeepSeek 长上下文性能漂移的原因。该研究评估了 DeepSeek-V4-Flash 等模型,发现长上下文检索准确度在不同相位间可能相差高达 40 个百分点,揭示了平均基准分数掩盖的周期性弱点。
SI 评分1
来源:IT之家 · ithome.com