跳到正文
量子位· 闻乐·· 8 天前AI 评分64

字节Seed发现DeepSeek-V4时强时弱源于KV Cache压缩的相位敏感性

字节找到了DeepSeek时强时弱的原因

AI 导读

字节Seed团队发现DeepSeek-V4的答题表现会随信息在输入中的位置每隔4个Token周期性变化,在128K长上下文大海捞针测试中,同一条信息换个位置,DeepSeek-V4-Flash-Base的检索准确率最大差距达40.2个百分点,DeepSeek-V4-Pro-Base为34.8个百分点。

来源:量子位 · qbitai.com