智能体方式 · 2026 技术判断

能力竞赛的主战场,已从“模型多强”转向“能否可靠办成事”

2026 年,前沿模型在旧基准上几乎满分,真正拉开差距的是模型之外的工程:Harness 脚手架、可交互环境、运行时记忆与治理。弘犀智能研究人员据此作出七条硬判断,并把它们装进一条七环节作业链——这是弘犀智能体产品与银行整体解决方案的设计骨架。

七条硬判断七环节能力架构TOP20 前沿算法 · TOP20 协作机制数据截至 2026-08
一位戴着全息护目镜的女性被粉蓝色的未来城市与流动的数据线条环绕
认知基线 · 2026 版图

基线刷新:2026 年 8 月的模型与基准实况

模型以“月”为单位迭代,旧基准接连饱和。2026 年的技术判断,不能建立在 2025 年的榜单上。

96.2%SWE-bench Verified 前沿最好成绩已饱和,区分度基本消失
61.5%SWE-bench Pro 标准化榜首多文件、企业级任务
<40%Terminal-Bench 3.0 前沿通过率2026 年 7 月新版
88.6 天METR 时间视界翻倍周期2024 年后;整体为 196.5 天
① 模型版图:2026 年的发布节奏以“月”为单位
厂商2026 年代表版本(发布时间)智能体侧亮点
AnthropicOpus 4.6(02)→ 4.7(04)→ 4.8(05)→ Fable 5 / Mythos 5(06)→ Opus 5(07)长时程编码与电脑操作;Vending-Bench 2 榜首
OpenAIGPT-5.4(04-10)→ GPT-5.5(04-23)→ GPT-5.6 Sol(07-09)SWE-bench Verified 96.2%;上下文 1M / 输出 128K
GoogleGemini 3.1 Pro(02-19)ARC-AGI-2 77.1%;τ²-bench 电信域 99.3%
阿里Qwen3.8-Max(08-03,2.4T MoE)OSWorld-Verified 86.1%,电脑操作居前
月之暗面 / 智谱 / DeepSeekKimi K3(07)· GLM-5.2(06)· DeepSeek V4 Pro(04)BrowseComp 91.2%;开源侧持续逼近
② 饱和与新生:同期基准的前沿最好成绩(%)
SWE-bench Verified96.2%
OSWorld-Verified86.1%
SWE-bench Pro(标准化榜)61.5%
Terminal-Bench 3.0<40%

旧榜饱和会系统性高估能力;判别力已转移到 SWE-bench Pro 与 Terminal-Bench 3.0。

③ 三条必须更新的旧认知
已饱和

SWE-bench Verified 冲到 96.2%,区分度基本消失;判别力转移到 SWE-bench Pro(标准化榜首仅 61.5%)与 Terminal-Bench 3.0(前沿 <40%)。

已加速

METR 时间视界翻倍周期:整体 196.5 天 → 2023 年后 130.8 天 → 2024 年后 88.6 天;Claude Opus 4.5 已达 320 分钟(5.3 小时)。

已扩维

GAIA2 用 1,000 个场景测七维(执行 / 检索 / 歧义 / 适应 / 时间 / 协作 / 噪声),并把成本与时延纳入帕累托前沿——单一分数不再够用。

基线结论:2026 年的技术判断不能建立在 2025 年的榜单上——旧榜饱和会系统性高估能力,新榜(SWE-bench Pro / Terminal-Bench 3.0 / GAIA2)才反映真实交付难度。

来源Vellum / Vals AI 聚合榜与 Scale SEAL 公榜(截至 2026-08);METR Time Horizon 1.1(2026-01-29);GAIA2 / ARE arXiv:2509.17158;各厂商官方模型卡

七条硬判断

瓶颈已转移:从“模型多强”到“Harness 多好”

版图已换代、瓶颈已转移、范式已扩轴、边界已厘清——七条判断各配一组关键数据、一条银行落点与一句话结论。

11–15 pct同一模型换 Harness 的分数波动
88.6 天METR 时间视界翻倍周期(2024 年后)
0→30%上下文压缩后的约束违规率
50→25%τ-bench 上 pass^1 到 pass^8 的衰减

Agentic RL + Harness

J1 Harness 决定分差

模型是发动机,Harness 才是变速箱

一句话定义智能体的实际表现 = 模型能力 × 脚手架(Harness)质量。Harness 指模型之外的一切工程:提示编排、工具集、上下文管理、子智能体分工、验证循环与状态持久化——它决定了同一个模型能跑出多少分。

机制拆解

  1. 上下文跨窗接力把长任务切成可交接的阶段,用结构化进度文件(如 progress.txt、init.sh)保证换窗不丢状态。
  2. 关注点分离规划、生成、评估交给不同的智能体;模型自评会“自我表扬”,必须引入外部评估者。
  3. 验证循环内建每完成一个特性即跑端到端验证,通过才允许标记完成并提交。
  4. 与模型共同设计Harness 的每个组件都编码了一条“模型自己做不到什么”的假设;Anthropic 在 Opus 从 4.5 升到 4.6 后,反而删掉了一个脚手架构件。
同一模型换 Harness 的最大分差(百分点)
GPT-5 · SWE-bench Verified11 pct
Kimi K2 Thinking · SWE-bench Verified15 pct
Claude Opus 4.5 · SWE-bench Pro6 pct
GPT-5.5 · Terminal-Bench 2.02.5 pct
更极端的对照:SWE-bench Pro 上的同族模型(%)
Scale SEAL 标准化评测(Claude Opus 4.5)45.9%
厂商自报 Harness 口径(同族模型)80.3%

20 分以上的落差全部来自脚手架与评测口径,而非模型本身。

代表工作

  • Claude Agent SDKHarness 可编程化
  • mini-SWE-agent约 100 行代码 → SWE-bench Verified 74%
  • Terminal-Bench榜单按“模型 × Harness”配对列名
  • poolside 2.1首次公开点名 Harness 过拟合

银行落点

选型不能只比模型分数。银行应建立“行内标准 Harness”,用同一套脚手架横向评测候选模型;供应商报价时必须说明其分数是在哪个 Harness、哪个评测口径下取得的。

一句带走

换模型的收益上限由模型定,换 Harness 的收益下限由你定——工程能力就是分差里的那 11 到 15 个百分点。

来源Anthropic《Effective harnesses for long-running agents》(2025-11-26)、《Harness design for long-running apps》(2026-03-24);Epoch AI《Why benchmarking is hard》(2025-12-23);Scale SEAL SWE-bench Pro 公榜;tbench.ai 榜单

Interaction Scaling — The Third Axis

J2 交互规模化

测试时计算的第三条 Scaling 轴

一句话定义扩展智能体能力有三条轴:预训练规模化(参数 × 数据)、测试时计算规模化(更长推理 + 多次采样)、交互规模化(与真实环境反复交互并接收可测量的外部反馈)。前两条共享同一个天花板,只有第三条能引入新信息。

机制拆解

  1. 同一副权重的困境论文原话——“每一个多出来的 token 都来自同一副冻结权重和同一段提示,因此它无法告诉模型任何它本来不知道的事”。
  2. 接地反馈是关键变量反馈与评估必须来自对系统行为的实际测量,而非模拟或目视检查。
  3. 提议—评审闭环编码任务上,proposer-reviewer 结构达到 100% 通过率且多次运行零方差;纯推理与多次采样在同等预算下先行进入平台期。
  4. 交互视界也可训练TTI 用课程式在线强化学习自适应延长 rollout 长度,让智能体学会探索、回溯与重规划。

产业含义:数据不再是唯一稀缺品,可交互的高保真环境成为新的生产要素——Prime Intellect 两个月众包了 400 多个强化学习环境。

三条 Scaling 轴对照
  1. 第一轴 · 预训练规模化加参数、加数据、加算力。收益确定但边际递减,且受限于高质量人类数据的存量。同一天花板
  2. 第二轴 · 测试时计算规模化延长思维链 + 多次采样投票。有效,但信息来源仍是冻结权重与原始提示,存在硬天花板。同一天花板
  3. 第三轴 · 交互规模化让智能体真去执行、真被测量、真收到反馈再修订。视觉任务实测:标准视觉模型把 15 张肉眼可见有缺陷的图中的 14 张评为“完美”,改用基于测量的工具后缺陷减少 40%–74%。引入新信息

代表工作

  • Era of ExperienceSilver & Sutton,2025
  • arXiv:2607.11598第三轴正式命名
  • TTI · arXiv:2506.07976交互视界扩展
  • AlphaProof10 万 → 1 亿条自生成证明

银行落点

银行最稀缺的不是模型,而是“可安全交互并给出真实反馈”的环境——脱敏仿真的信贷审批沙盘、对账回执、工单闭环结果,都是天然的接地反馈源,也是行内数据资产的新形态。

一句带走

想让智能体真正变强,不要只买更大的模型,要给它一个能反复摔跤并被真实计分的环境。

来源Silver & Sutton《Welcome to the Era of Experience》(2025);arXiv:2607.11598《Interaction Scaling》(2026-07);TTI arXiv:2506.07976;Prime Intellect Environments Hub

Memory-based RL at Runtime

J3 运行时记忆强化学习

不改权重也能进化

一句话定义把强化学习的“策略提升”从梯度更新搬到记忆读写:智能体把每次任务的状态、动作与结果写入案例库,下次遇到相似情形先检索经验再决策——不训练模型,却能持续变强。

机制拆解

  1. 案例库式在线 RL(Memento / AgentFly)建模为记忆增强的马尔可夫决策过程,规划器—执行器分工,策略提升完全由记忆检索与重写完成,零梯度更新。
  2. 推理经验库(ReasoningBank,ICLR 2026)从成功与失败中同时蒸馏可泛化策略,而非存原始轨迹;配合 MaTTS 把测试时算力用于生成多样经验,反哺记忆质量。
  3. 早期经验(Early Experience,Meta)用智能体自身动作产生的未来状态做无奖励监督:隐式世界建模 + 自我反思,介于模仿学习与强化学习之间。
  4. 共同收益成功率与效率同时改善——这是纯提示技巧做不到的关键分野。

同时降本:完成任务所需的交互步数下降 6%–16%(WebArena 9.7 → 8.3 步)。Memento 在 GAIA 验证集取得 87.88% Pass@3、测试集 79.40%,全部不改模型权重。

ReasoningBank 在 WebArena 上的增益(成功率 %)
  • 无记忆
  • + 推理经验库
  • + 记忆感知测试时扩展
Gemini-2.5-flash40.5%48.8%51.8%
Gemini-2.5-pro46.7%53.9%56.3%
Claude-3.7-sonnet41.7%46.3%48.8%

代表工作

  • Memento / AgentFlyarXiv:2508.16153 · GAIA 87.88% Pass@3
  • ReasoningBankarXiv:2509.25140 · ICLR 2026
  • Early ExperiencearXiv:2510.08558 · Meta

银行落点

这是“数据不出行”约束下最现实的进化路径:模型可以私有化但不常训,行内经验库却能日日增长——把每一次人工修正沉淀为可检索的案例,等于用业务反馈持续训练智能体。

一句带走

智能体进化的载体正在从“权重”转向“记忆”——这对不能频繁训练模型的银行,是天大的好消息。

来源Memento / AgentFly arXiv:2508.16153(UCL / 华为诺亚);ReasoningBank + MaTTS arXiv:2509.25140(Google Research,ICLR 2026);Early Experience arXiv:2510.08558(Meta MSL + FAIR + OSU)

Read–Write Asymmetry

J4 读写不对称

多智能体已收敛为“多路并行地读、单点串行地写”

一句话定义经过两年实践,多智能体架构收敛出一条共识:读操作天然可并行,写操作必须收敛到单线。动作里携带隐含决策,冲突的决策会产生糟糕的结果——所以“多路并行地读、单点串行地写”成为默认范式。

机制拆解

  1. 原话为证(LangChain)“read actions are inherently more parallelizable than write actions”——读可并行、写需单线,是架构选择的第一原则。
  2. 失败机理(Cognition)动作携带隐含决策;子智能体各自脑补上下文,会产出风格与假设互相冲突的结果,合并时无法弥合。
  3. 正例结构(Anthropic)多智能体系统主要承担“检索(读)”,把发现综合成连贯报告的“写”刻意交给单一主智能体。
  4. 工程对应2026 年出现了把数据库并发控制引入多智能体的工作(CoAgent),本质就是给写操作加锁与串行化。

并行度收益:一次派生 3–5 个子智能体、每个再并行 3 个以上工具调用,复杂查询耗时最多缩短 90%;代价是 token 约为普通对话的 15 倍。

推荐拓扑:扇出读、收敛写
  1. 主智能体目标拆解,派发子任务
  2. 读 · 检索 A | 读 · 检索 B | 读 · 核验 C可并行:各自独立上下文,只回传浓缩摘要
  3. 单一写入者(串行)综合 · 落库 · 提交

代表工作

  • LangChain(2025-06)读写不对称原话
  • Cognition《别造多智能体》
  • Anthropic读并行 / 写单线
  • CoAgent(2026)并发控制引入多智能体系统

银行落点

银行天然懂这条:调查、审查可以多岗位并行取证(读),但审批结论与账务处理必须单点落笔(写)。把“写”集中到唯一有权限的智能体或人工节点,既是架构最优,也是内控要求。

一句带走

让智能体像团队一样并行地查,但永远只让一个人签字——这就是读写不对称。

来源LangChain《How and when to build multi-agent systems》(2025-06-16);Cognition《Don’t Build Multi-Agents》(2025-06-12);Anthropic 多智能体研究系统(2025-06-13);CoAgent arXiv:2606.15376

Self-Correction: From Denial to Nuance

J5 内生反思的硬边界

模型能自我证伪了,但有三条硬边界

一句话定义“大模型不能自我纠错”的旧结论已被推翻:经强化学习专门训练后,模型可以实现真正的内生自我纠正;但 2026 年的新证据同时划出三条边界——归属错觉、过度检查、思维链未必忠实。

机制拆解

  1. 2023 · 否定《LLMs Cannot Self-Correct Reasoning Yet》(ICLR 2024):无外部反馈时,内生自我纠正通常反而降低性能。
  2. 2024 · 翻转SCoRe 用两阶段多轮强化学习加奖励加成,首次以纯自生成数据实现显著内生自纠:MATH +15.6%、HumanEval +9.1%。
  3. 2025 · 内化长思维链推理模型把回溯与自我验证变成默认行为,显式反思框架的重心转向跨轨迹经验沉淀。
  4. 2026 · 精细化失败主因是“来源归属”而非能力——把内部思考重标为外部信息后,显式纠错率在 12 组模型—领域中的 10 组提升 23–93 个百分点。

银行结论:自我反思可用于“初筛降噪”,不可用于“终局定论”;凡涉及资金与客户权益的判断,必须有外部可验证信号或人工复核。

三条必须记住的边界
归属错觉

模型纠正“别人的错”远强于纠正“自己的错”。工程对策:把待检查内容以外部来源的身份重新呈现(角色重标签),零成本获得 23–93 个百分点的纠错率提升。

过度检查

《自我验证困境》指出,反复自查会抑制正确答案、拖长推理链,需要主动抑制而非无限鼓励——反思次数应设上限。

未必忠实

开放权重推理模型的思维链忠实性受到质疑:写出来的推理未必是真实决策依据,因此自我验证不能替代外部证据校验。

代表工作

  • arXiv:2310.01798否定命题(ICLR 2024)
  • SCoRe · arXiv:2409.12917DeepMind 翻转
  • arXiv:2606.05976自纠错幻象 · 角色重标签
  • arXiv:2602.03485过度检查有害

银行落点

把反思机制放在流程前段做降噪(如可疑交易初筛、材料完整性自查),把“证伪”的最终权力留给外部证据与人工——这与银行“复核制”的逻辑完全一致。

一句带走

模型能自我证伪了,但别让它给自己当法官——纠错要有外部身份,检查要有次数上限。

来源arXiv:2310.01798(ICLR 2024);SCoRe arXiv:2409.12917(DeepMind);arXiv:2606.05976 自纠错幻象(2026);arXiv:2602.03485 自我验证困境;arXiv:2603.22582 思维链忠实性

Compaction Erases Safety Constraints

J6 压缩会抹除安全约束

压缩 ≠ 记忆:会话越长,规矩越容易被“总结掉”

一句话定义上下文压缩是有损的语义重写,不是记忆。长会话为控住 token 预算而做摘要时,最先被丢弃的往往是“低频但高约束力”的安全与合规指令——约束一旦从压缩后的上下文中消失,智能体就“看不见”规则,随即通过工具调用违规。

机制拆解

  1. 长上下文本身会衰减注意力预算被稀释,token 越多召回越差;标称百万级窗口的模型,在十万 token 处即出现超过 50% 的性能下降。
  2. 所以必须压缩接近窗口上限时做摘要并重启新窗口,这是工程上的必然选择。
  3. 压缩是有损重写Anthropic 原话——“过于激进的压缩会丢失微妙但关键的上下文,其重要性往往在事后才显现”。
  4. 于是治理衰减约束在摘要中存活时违规率为 0%,被丢弃时为 38%;整体从全上下文的 0% 升到压缩后的 30%,最差模型达 59%。

附加攻击面:压缩—驱逐攻击——对抗性内容可诱导摘要器“故意漏掉”合规策略。缓解手段“约束固定(Constraint Pinning)”无需重训即可把违规率恢复到 0%。

上下文压缩前后的约束违规率(%)
全上下文0%
压缩后(平均)30%
压缩后(最差模型)59%
约束被摘要丢弃时38%
启用约束固定后0%

代表工作

  • arXiv:2606.22528治理衰减 · 1,323 个 episode
  • arXiv:2512.02445长上下文拒绝率漂移
  • Context RotChroma · 18 个模型
  • 约束固定违规率可恢复至 0%

银行落点

这条直接决定架构:合规红线、权限边界、客户身份等约束必须以“固定区块”形式在每次上下文重建时无条件重新注入,绝不能进入可被摘要的部分;同时对压缩事件本身留痕,作为审计线索。

一句带走

会话越长,规矩越容易被“总结掉”——把红线钉死在上下文里,而不是指望摘要记得住。

来源arXiv:2606.22528《Governance Decay》(2026-06);arXiv:2512.02445《When Refusals Fail》(2025-12);Anthropic《Effective Context Engineering》(2025-09-29);Chroma《Context Rot》(2025-07)

The New Measurement Stack

J7 度量体系换代

单一分数已不足以定生死

一句话定义智能体的评价正从“单点准确率”转向四维度量:时间视界(能独立干多久)、一致性(能不能次次都对)、成本与时延(帕累托前沿)、鲁棒性(歧义、噪声、时间约束下的表现)。

机制拆解

  1. 时间视界(METR)以 50% 成功率对应的人类任务时长衡量自主性;翻倍周期已从整体 196.5 天加速到 2024 年后的 88.6 天;16 小时以上的测量目前不可靠。
  2. 一致性(pass^k)同一任务连跑 k 次全部成功才算通过。τ-bench 实测:pass^1 约 50% 的智能体,pass^8 降到约 25%——可靠性远落后于能力。
  3. 成本与时延(GAIA2)结果按平均调用数与输出 token 归一化,并把响应时延作为独立维度,评的是帕累托前沿而非最高分。
  4. 长时程连贯(Vending-Bench 2)模拟经营一整年、单次运行 3,000–6,000 条消息,测的是会不会“跑着跑着精神崩溃”。

含义:一个“十次里对五次”的智能体,连续八次全对的概率只剩四分之一。对客户每次都要办成的银行业务,pass^k 才是真正的上线门槛,平均成功率会严重高估可用性。

可靠性衰减:pass^1 → pass^8(τ-bench 零售域,%)
pass^150%
pass^241%
pass^432%
pass^825%

代表工作

  • METR TH 1.1228 个任务 · 2026-01
  • τ-bench pass^karXiv:2406.12045
  • GAIA2 / ARE1,000 个场景 · 七个维度
  • Vending-Bench 2模拟 365 天经营

银行落点

把上线标准从“平均准确率 ≥ X%”改写为“pass^k ≥ Y%(k 取 5 或 8)+ 单任务成本上限 + P95 时延上限”,并按业务风险分级设定阈值——这是可写进制度的验收口径。

一句带走

能做对一次是能力,次次都做对才是可用——银行要买的是后者。

来源METR Time Horizon 1.1(2026-01-29);τ-bench arXiv:2406.12045(Sierra);GAIA2 / ARE arXiv:2509.17158(Meta);Andon Labs Vending-Bench 2

七环节能力架构

把七条判断,装进一条可执行的作业链

从“完成感知”到“持续改进”,七个环节缺一即失控。每个环节都对应可用的前沿技术、协作机制与平台模块——点击标签即可跳转到对应的技术说明。

  1. 完成感知

    识别任务边界与“什么算完成”:目标、验收标准、约束红线一次性明确。

  2. 认知规划

    任务分解与路径选择,形成可核查的计划与里程碑,而非一次性长链。

  3. 资源调用

    按需检索知识、读取记忆、选择并调用工具,控制上下文预算。

  4. 受控执行

    在权限、沙箱与审批闸门内执行;写操作单线收敛,危险动作二次确认。

  5. 结果验证

    外部证据校验 + 独立裁判打分 + 多视角交叉复核,而非自说自话。

  6. 风险治理

    全链路留痕、异常熔断、越权阻断、内容标识与合规报送。

  7. 持续改进

    把人工修正与失败案例回写经验库,驱动评测集与策略迭代。

这七个环节就是整个体系的骨架

前沿算法 TOP20 讲每个环节可用的技术,大模型 × 智能体协作 TOP20 讲环节之间的协作机制,整体解决方案把它落成银行智能体平台的组件。

环节缺一即失控

缺④受控执行会越权,缺⑤结果验证会交付幻觉,缺⑥风险治理无法审计,缺⑦持续改进则永远停在试点。

框架说明:七环节为弘犀研究的综合归纳,用于把技术判断映射到可执行的作业链;其治理要求可直接对应金发〔2026〕8 号的全生命周期管理与“高风险应用关键环节人工监督干预”条款,能力分层参考信通院与华为《智能体技术和应用研究报告(2025)》。

查看七环节到平台组件的映射

两张 TOP20 全景

哪些今天就能用,哪些需要建设,哪些先观察

二十项前沿技术按成熟度、门槛与银行相关度分为三区;二十项协作机制按“先降本、再合规、后扩展”的顺序落地。

前沿算法 TOP20 · 银行优先级

先行区四星成熟 + 低门槛:今天就能进项目,投入产出比最高。

观察区门槛极高或场景尚早,以研究性投入与沙箱验证为主,不进生产。

选型铁律:成熟度高不等于必须上,先看它能不能对上手中真实的业务痛点。

查看前沿算法 TOP20

大模型 × 智能体协作 TOP20 · 落地顺序

  1. 1

    立竿见影降本上下文装配规范与模型路由

  2. 2

    守住合规底线分级审批与评测、可观测

  3. 3

    补齐知识与记忆检索、图谱与记忆服务

  4. 4

    按需引入多智能体编排模式与读写不对称

最常见的错误顺序:先做多智能体炫技,再补评测与审批——结果既证明不了效果,也过不了合规评审,最终沦为演示。

查看协作 TOP20
关于本系列

由弘犀智能研究人员完成的体系化研究

弘犀智能研究人员

弘犀研究 · 智能体技术体系

  • 七条硬判断 · 七环节架构
  • 前沿算法与协作机制各 TOP20
  • 数据截至 2026 年 8 月

本系列整理自弘犀智能研究人员的专题研究《LLM+HarnessAgent+WM 的能力竞赛——智能体前沿技术算法与银行业务落地》,系统梳理 2026 年智能体的前沿技术与算法、大模型与智能体的协作机制,以及银行智能体平台的参考架构。本系列的七环节与平台架构,也是弘犀为金融机构设计智能体方案时遵循的方法。

进入弘犀研究

四条引用严谨性约定

  1. 术语论文标注 arXiv 编号,监管文件标注文号与施行日;未检索到公开出处的术语不采用或单独标注(上下文“提取—过滤—压缩”管线以最接近的公开工作 Agentic Context Engineering,arXiv:2510.04618 为准)。
  2. 框架“完成感知—认知规划—资源调用—受控执行—结果验证—风险治理—持续改进”七环节为弘犀研究的综合归纳,非某一标准原文。
  3. 数据第三方聚合榜数据均为“截至 2026-08”口径,会随时间变化;厂商自报成绩与标准化评测成绩分开呈现;标注为示意或经验区间的图表不作为精确数据引用。
  4. 口径容量估算、成本降幅、token 预算等工程数值均为量级参考,须以行内实测替代;监管条款以正式发布文本为准,本系列仅摘录与智能体设计直接相关的部分。
开始合作

从一个业务问题开始,让 SAM 给出可验收的模型

无论您来自银行业、快消营销、制药还是其他行业,都可以先在线试用,或预约我们的建模专家交流具体场景。