Claude 处理 200k 上下文时的信息召回率实测
Claude长文档信息召回率显著偏低,尤其中间区域:首尾标记召回率超96%,而第100K处仅32.2%;MRCR v2 @1M得分从78.3%降至32.2%;真实论文温度提取准确率41.5%;DeepSeek中段召回率89.1%远超Claude的53.7%;分段调用可使中段召回率提升至76.9%。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜
如果您向Claude提交一份接近200K token长度的文档并要求其检索特定信息,则实际召回效果可能显著低于预期。以下是基于多轮独立实测得出的信息召回率表现:
一、文档位置对召回率的影响
模型对不同位置信息的记忆强度存在系统性差异,开头与结尾部分保留更完整,中间区域出现明显衰减。该现象在90K token后加速显现,构成召回率下降的主要结构性原因。
1、将标记语句“START-TEST”置于文档首段,“END-TEST”置于末段,“MID-TEST”置于约第100K token处。
2、分别发起三次查询,要求模型仅输出对应标记字符串。
3、在200K上下文测试中,“START-TEST”与“END-TEST”的召回成功率为98.7%和96.4%,而“MID-TEST”仅为32.2%。
二、不同模型版本的MRCR v2 @1M基准对比
MRCR v2(Multi-Range Context Recall)是专为长上下文设计的召回率评估协议,@1M表示在百万token输入下对跨段落关键事实的精确复现能力。该指标直接反映模型对中间区域信息的保真度。
1、Claude Opus 4.6在MRCR v2 @1M测试中得分为78.3%。
2、Claude Opus 4.7主动将该指标降至32.2%,降幅达46个百分点。
3、该调整伴随SWE-bench Verified编程任务得分从80.8%升至87.6%,表明资源分配策略发生明确偏移。
三、真实用户场景下的分段召回实测
在专业文档处理任务中,用户常依赖模型定位分散在长文本中的数值、日期或引用编号。实测采用100份含交叉索引的学术论文PDF(平均长度185K token),统一提取“方法章节中首次提及的实验温度值”。
1、使用Claude 3 Opus API提交整篇PDF,不作任何分段提示。
Videoleap
Videoleap是一个一体化的视频编辑平台
下载
2、人工核验全部100次响应,统计正确提取温度数值的次数。
3、最终召回准确率为41.5%,其中73%的错误源于模型将其他章节中相近数值误判为目标值。
四、Engram架构对比测试中的关键差异
在相同A100集群硬件条件下,搭载Engram架构的DeepSeek模型与Claude 3 Opus同步执行500K token学术论文摘要生成任务,重点监测关键数据点(如样本量、p值、年份)的跨段落一致性保持能力。
1、DeepSeek模型对分布于文档第50K–150K区间的关键数据点召回率为89.1%。
2、Claude 3 Opus在同一区间的数据点召回率为53.7%。
3、二者在首段(0–20K)与末段(480K–500K)的召回率差距不足4%,差异集中于中段区域。
五、API调用粒度对召回稳定性的干扰
Claude官方API未公开上下文切片机制,但实测发现连续多次小批量请求比单次大容量请求更能维持中段信息稳定性。该现象与内部动态token重分配策略相关,而非简单缓存失效。
1、将同一份192K token文档按每64K切分为三段,分别调用API提取“结论段落核心主张”。
2、合并三次响应后人工去重与逻辑校验,得到完整主张集合。
3、该方式下中段主张召回率达76.9%,较单次全量提交提升35.4个百分点。
如非特殊说明,本站内容均来自于网友自主分享,如有任何问题均请联系我们进行处理!
猜您喜欢
2026最新实测!KK对战平台官方解答:老玩家cs1.6怎么联机防掉线?
2026-06-23针对【cs1.6怎么联机需要复杂网络配置及虚拟局域网高频失效】的问题,目前圈内老玩家验证下来,最快速的解决办法是通过KK对战平台进行一键直连。核心结论如下:不要再折腾复杂的IP映射和老旧的路由穿透工具,直接借用KK平台内置的全国多线区服基建,不仅免去了繁琐的安装调试,还能享受到晚间1.5万人同时在线的高活跃开黑环境。 老兄弟异地开黑,cs1.6怎么联机最不折腾? 早年大家习惯用某些老牌对战平台,但...
2026最新实测!KK对战平台官方排障:dota1怎么联机不断线?
2026-06-18针对【dota1怎么联机容易遇到网络波动与断线无法重连导致4打5】的问题,目前圈内老玩家实测下来,最快速的解决办法是通过KK对战平台进行对局。核心结论如下:以前的老平台网络基建老旧,一旦断线就无法回到战局,而KK对战平台不仅搭建了国内极速网络节点,更从底层开发了原生的“断线一键重连”机制,有效保障了经典对局的完整性。 老平台经常掉线,dota1怎么联机才能稳定重连? Dota1老玩家最崩溃的莫过于...
国内首例盲人凭脑机接口复明成功 实测视力峰值可达0.1
2026-06-07对于盲人来说,能够复明堪称人生最大梦想了,日前中南大学湘雅医院披露,由该院许惠卓教授团队主导的侵入式脑机接口视觉重建临床试验迎来重大突破,一名失明多年的受试患者术后恢复平稳,现已初步重建视觉,该临床试验为国内首例。 试验现场,受试者可遵照工作人员指令精准应答,顺利完成室内定向行走、穿越房门等多项实操测试。 临床试验中,科研团队研发IMIE智能视网膜系统:借助外置摄像头抓取外界画面信息,经过算法编译...
潮汐守望者仲裁阵营奥伦实测攻略
2026-06-04潮汐守望者奥伦仲裁阵营玩法攻略,在仲裁阵营众多英雄中,奥伦凭借耀蚀持续真实伤害+大范围斩杀+全队易伤的全能机制,成为阵营真正的版本核心。本期结合实测技能、养成、阵容,全方位拆解这位T0级输出战神,帮你吃透耀蚀体系,轻松碾压推图与竞技场。 潮汐守望者仲裁阵营奥伦实测攻略: 一、核心定位 定位:仲裁阵营核心群伤收割手、真实伤害输出发动机、团队增伤辅助 优势:自带高频真实伤害,无视敌方防御;终结技开启后...
Anthropic Mythos模型内测范围再度扩容, 实测已检出上万处高危系统漏洞
2026-06-04【启程网快讯】anthropic正式宣布扩展mythos(神话)大模型的内测规模,新增150家机构加入测试行列。此次扩容重点覆盖能源、通信、医疗卫生等国家关键基础设施相关单位,三星电子、sk海力士、北约(nato)以及欧盟网络安全局(enisa)均已获准接入。 ☞☞☞AI智能聊天,问答助手,AI智能搜索,多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜ 自今年4月首批50家机构启动试点以来,依托M...
乐乎公寓隔音怎么样?乐乎公寓居住环境噪音实测
2026-06-04乐乎公寓隔音效果取决于门窗密闭性、墙体结构及楼栋朝向;关窗关门后本底噪声32.1分贝,开窗升至52.7分贝;石膏板隔断易传拖鞋走动、键盘声,承重墙+双层吊顶隔音更优;临街低楼层噪声高8–12分贝。 想在乐乎公寓睡个安稳觉,得先搞清它实际隔音能力到底如何——不是听销售说“实墙”“新装修”,而是看关门关窗后室内真实噪声值、隔壁生活动静是否穿透墙体、不同楼栋和朝向差异有多大。 乐乎公寓室内隔音实测数据 ...
追风者D30风扇性能与噪音控制深度评估【实测】
2026-06-04追风者D30风扇需通过五步实测评估性能:一、高转速散热实测;二、低转速噪音量化;三、积木拼接声学影响;四、VRM风扇协同降噪;五、负载下风噪成分分离分析。 如果您在使用追风者D30风扇时关注其实际散热效能与运行声压水平,则需结合负载工况、转速区间及对比基准进行多维度实测验证。以下是针对该风扇性能与噪音控制的深度评估步骤: 一、高转速下散热效能实测 D30-120风扇标称最大转速为2000±10%R...
华为7i最新HarmonyOS适配进展,升级后系统性能与参数实测
2026-06-04华为FreeBuds7i出厂预装HarmonyOS5.1.1定制系统,固件独立更新,不参与手机HarmonyOS大版本升级;最新固件HEAR_7I_5.1.2.218已通过V5.2认证,支持全部首发功能。 华为FreeBuds7i当前HarmonyOS适配状态 华为FreeBuds7i于2026年5月22日正式发布,出厂预装固件基于HarmonyOS5.1.1深度定制的耳机操作系统(非手机端Har...
