清华微软联合开源的多智能体推理框架,通过 Reasoner、Verifier、Meta-Strategist 三个角色让长程推理可验证可回溯,Apex 基准超 GPT-5.5 达 13.5%。


清华微软联合开源的多智能体推理框架,通过 Reasoner、Verifier、Meta-Strategist 三个角色让长程推理可验证可回溯,Apex 基准超 GPT-5.5 达 13.5%。
面对最难的数学竞赛题,最强的大模型也会反复在同一个错误上空转——它们会沿着一条看似合理的路线不断补充细节、写出颇具说服力的论证,却缺乏「这不是需要继续打磨的解法,而是一条死路」的元认知。清华与微软亚洲研究院联合开源的 STAR-PólyaMath 用一套多智能体框架解决了这个问题:通过 Reasoner、Verifier、Meta-Strategist 三个角色的循环驱动,让推理过程变得可验证、可回溯、能跨尝试积累经验。在八大顶级数学竞赛基准上全部取得最优,Apex 基准领先同基座 GPT-5.5 达 13.5%。

框架灵感来源于波利亚(George Pólya)在《How to Solve It》中提出的解题步骤——理解问题、制定计划、执行计划、回顾反思,并结构化为四个阶段:探索、规划与分解、逐步执行与挑战循环、解答生成。
前沿大模型在常规推理上已经非常强大,但面对需要多步探索、假设验证、甚至推倒重来的长程推理时,三类系统性的失败模式反复出现。
幻觉累积与可信性问题。 模型倾向于对自身的中间结论保持高置信度,一个看似微小的错误(例如边界情况的遗漏)会在后续推导中不断放大。
跨尝试的记忆丢失。 当一条证明路径失败需要回溯时,大多数系统要么保留过多上下文信息导致无法准确定位错误,要么丢失之前尝试的关键信息,结果是反复尝试已经被证伪的方向。
推理与工具使用的失衡。 运行代码是可靠的验证手段,但经过工具使用数据训练的模型会系统性地偏向代码而忽视数学结构的发掘。反过来,纯自然语言推理又难以处理需要符号化构造的问题。
整个框架由一个无推理能力的 Python 编排器(Orchestrator)协调三个智能体角色。
负责实际的问题求解:探索问题结构、提出计划、执行每一步的推理或计算,并在受到质疑时为自己的论证辩护。它的输出始终需要通过验证环节。
在一次尝试(即顺序执行一个计划)中,Reasoner 保留完整记忆;但在回溯和重新计划时重置记忆,以减少错误推理的污染。
对 Reasoner 的输出进行独立审查,不保留记忆。审查有两个门控机制:
审查后给出四种判定之一:通过(Accept)、质疑(Challenge)、回溯(Trace-Back)或重新规划(Propose-Replan)。
这是该框架最关键的创新。它不执行任何具体的数学推理,而是在更高层面给出指导——就像一位经验丰富的导师。它在整个问题的解决过程中保持单一持久会话,积累所有之前的尝试、被放弃的策略以及长期存在的失败模式。

在关键时刻,Meta-Strategist 会给出具体的策略建议,例如在 Verifier 提出重新规划时做出最终裁决。当检测到 Reasoner 连续陷入无意义的计算等待时,它可以发出强制性指令,要求切换到禁止使用代码的纯推理模式。
MathArena Apex 2025 Problem 2(源自 Turkey TST 2025 P5)是一个典型案例,正确答案是 k = 1/2。开启最高思考强度的 GPT-5.5 对这道题进行了 8 次独立尝试,只对了 1 次——它快速收敛到某个次优构造(得出错误答案 3/4),并努力提供逻辑自洽的论证来支撑这个错误结论。
在同一个问题上,STAR-PólyaMath 的 Reasoner 第一次尝试同样失败(得出 3/4),但 Verifier 始终质疑其证明过程。经历三次超时失败后,Meta-Strategist 做出一个关键判断:「这个方向是根本错误的」,明确禁止后续推理重新锚定在 3/4 上,并授权重新规划。新方案找到了一个更密集的构造,将结果推至 1/2,并通过数学推导和实际构造代码验证完成了严格证明。
💡 提示:基座模型替换实验清楚地表明性能提升来自结构化推理 harness 框架,而非模型本身。将基座模型从 GPT-5.5 替换为 GPT-5.2 或 Claude Opus 4.7 后,框架仍然在所有基准上超越对应模型的直接调用结果。这意味着你可以用更便宜的模型达到接近的效果。
STAR-PólyaMath 通过分层验证标签让长程推理的每一步都具有可检验性。每个中间断言都必须标注为:
[verified]:已执行代码验证[easy-verify]:可通过简单计算检查[hard-verify]:需要严格的数学审查这套标签决定了 Verifier 的审查力度,代码验证的结果被直接视为可信,纯数学论证则接受最严格的逻辑审查。
从实际运行统计看,这种分层策略体现了清晰的适应性:
[hard-verify]STAR-PólyaMath 使用 GPT-5.5(xhigh effort)作为三个智能体的基座模型,在 8 个顶级数学竞赛基准上全部取得最优成绩。

亮点数据:
计算开销与问题难度高度相关:
框架不会对简单问题施加不必要的开销,但在真正困难的问题上投入充足的计算资源进行探索推理。
STAR-PólyaMath 的设计并不依赖数学领域的特殊性质。其核心机制(将长程任务分解为可验证的子步骤、结构化检验每一步、跨尝试记忆、高层次监督)本质上适用于任何需要长程、可回溯、可验证推理的场景。
项目已开源完整的代码框架、所有角色的 prompt 和 skill 定义、运行配置,便于社区将这套推理协议迁移到其他领域。
💡 使用建议:如果你的工作涉及需要多步验证的复杂推理(数学证明、算法设计、科研探索),可以直接基于开源代码尝试。对简单任务不要套用全套框架——AIME 级别的问题 100% 在探索阶段就解决了,多余的智能体调度只会增加成本。

Codex 的 Computer Use、Chrome 插件、应用内浏览器三种操作模式各有适用场景,本文拆解权限体系并给出最佳实践。

Seko 搭载 Seedance 2.0 全能模式,通过 Agent 工作流自动生成剧情、角色和分镜,720P 成本直降 50%,10 分钟出片。

Catnip 团队推出 22B 参数流式音视频模型 MaineCoon,单卡 H100 跑出 47.5 FPS,成本仅为 Veo 3 的 1/2000,支持 30 分钟以上音画同出。