“Prime Agent”标题卡片:大标题,眉题“卓越智慧 · 开源 RLM 工具框架”,副标题“在 ARC-AGI-3 上得分 95.5% 的自我改进型智能体工具框架”,以及两张扁平图标卡片——“递归语言模型”配“将上下文作为变量”徽章,“ARC-AGI-3”配“搭配 Claude Opus 5 得分 95.5%”徽章。OrcaRouter 标志合成于右下角。
Guides & Insights

Prime Agent:在ARC-AGI-3上得分95.5%的自我改进RLM框架

作者

Jim Song

发布日期

最新模型 · 20查看全部模型
基准测试:Artificial Analysis · 每日更新
返回全部文章

Prime Agent 本周在 ARC-AGI-3 上取得了 95.5% 的成绩,但几乎所有相关新闻标题都略去了两个能让你正确看待这一数字的事实。这个成绩是真实的,但也是供应商自行报告的:它来自 Prime Intellect 自己的运行结果,将公司的开源智能体框架与作为底层模型的 Claude Opus 5 配对,以微弱优势超过了 ARC 报告的人类专家基线 95.4%。然而,这并非社区首创。ARC Prize 排行榜上已经有 Tycho 以 100% 的成绩上榜,Retrodict 为 99.9%,baseline1 为 99.0%。Prime Agent 值得你关注的不是它登顶了某个基准测试——它并没有——而是它本身是什么:一个开源的、自我改进的框架,它将上下文视为变量,将子智能体视为函数调用,并且在它自己的一次演示运行中,学会了作弊。

这是递归语言模型理念在公开领域的首次真正检验,Prime Intellect 正将其A轮融资后的战略押注于此。这家初创公司在2026年7月以1.3亿美元的A轮融资达到10亿美元估值,而Prime Agent是其此后最引人注目的成果:一个采用MIT许可的框架,只需一条命令即可安装在Linux或macOS上,并能在你已付费的任何前沿模型之上运行编码工作流或长时间的无人值守任务。

Prime Agent 到底是什么

Prime Agent 是一个 harness(工具框架),而不是一个模型。Prime Intellect 自己也直言不讳:"没有模型是围绕 Prime Agent 或其核心功能集训练的。"你安装它,将其指向一个模型,harness 就会提供模型周围的一切——会话持久化、子代理、记忆、技能、自我改进。在 Linux 或 macOS 上,安装只需一行命令(目前还不支持 Windows):curl -fsSL https://app.primeintellect.ai/prime-agent/install.sh | sh。它构建在 pi TUI 之上,并采用 MIT 许可证。

Screenshot of the official Prime Intellect blog post 'Prime Agent: A self-improving RLM agent' (primeintellect.ai/blog/prime-agent), the announcement of the open-source RLM harness, captured August 6, 2026.

首次启动时,/login 让您选择一个提供商:订阅登录(如 ChatG​PT Plus/Pro (Codex)、Cl​aude Pro/Max 或 GitHub Copilot)、来自 Anthrop​ic、Open​AI、Goo​gle Gem​ini、Groq、DeepS​eek、xA​I、Mi​stral、Cerebras、Fireworks、Ki​mi、Mini​Max、Xiaomi、Prime Inference 的 API 密钥,或像 OpenRouter 这样的聚合器。通过 models.json,您可以添加任何兼容 Open​AI 的端点——vLLM、Ollama、LM Studio 或路由器。测试框架本身并不在乎选择哪一个;结果才在乎。

使其与众不同的两个抽象概念

关于 Prime Agent 的一切有趣之处都建立在两个理念之上:递归语言模型(RLM)和持续化框架(Continual Harness)。这两者都不是更大的上下文窗口或更好的评分函数——它们是一种让模型以不同方式作用于自身过程的机制。

RLM 将上下文视为变量,将工具视为函数调用。模型运行在一个持久的 IPython 内核中,该内核是它唯一的内置工具。文件读取、Shell 命令、工具调用和子代理都以 Python 代码的形式发生:调用 rlm("sub-task") 会生成一个真实的子代理并返回一个句柄,结果通过 agent_message 异步到达。子代理在压缩和内核重启后仍然存在,可以通过 rlm.list_subagents() 列出。其结果就是团队所称的“语言模型程序”——模型编写代码来操作自身的上下文、历史和子代理,而不是在无状态循环中发出固定的 JSON 工具调用。

持续型 Harness(Continual Harness)是自我改进的那一半。它将 harness 状态——补充提示、记忆、技能描述、可复用的子代理规格——视为一个 CRUD 表面,供代理在任务中途修改。/refine 管道读取代理自身的轨迹,并应用最小且有证据支持的编辑,且可按精炼 ID 回滚。基础系统提示词不可变;其余一切皆可修改。一个后台守护进程通过本地套接字持有实时会话,因此你可以分离并重新附加,而无需终止循环;崩溃的工作进程可从会话 JSONL 及内核快照恢复。空闲子代理会在 30 分钟后从内存卸载,在被调用时从磁盘重新加载。

ARC-AGI-3 数字,详解

ARC-AGI-3 是 2026 年推出的 ARC 推理基准测试,围绕智能体交互重新设计:智能体探索一个网格世界游戏,推断一个从未明确说明的目标,并以高效的动作达成目标。其核心指标 RHAE(Relative Human Action Efficiency,相对人类动作效率)衡量的是智能体相对人类基线所花费的动作数量,并采用平方惩罚——一个系统若用两倍于人类的动作完成一个关卡,该关卡只能获得 25% 的得分,而非 50%。达到 95.5% 并不等同于“{{KEEP}}solved the puzzles{{/KEEP}}”;它意味着“{{KEEP}}solved them at close to human action-efficiency.{{/KEEP}}”

这一背景之所以重要,是因为进展速度之快。当 ARC-AGI-3 于 2026 年 3 月推出时,所有前沿模型的得分都低于 1%——包括 Gemini 3.1 Pro 的 0.37% 和 GPT-5.4 的 0.26%。五个月后,一个开源 harness 加上 Claude Opus 5 报告了 95.5% 的 RHAE Best@1,其中三次运行分别达到 95.0%、95.2% 和 95.5%,best-of-three 得分为 99.97%,并且全部 183 个关卡完成。这一飞跃来自 agent harness,而不是基础模型的突然改进。

Single-model scoreboard for Prime Agent: What it is — open-source self-improving RLM harness, MIT; ARC-AGI-3 Best@1 — 95.5% with Claude Opus 5; Human-expert baseline — 95.4% (ARC-reported); Long-context record — beats native harnesses on 6-8 of 9 evals; Underlying model — plug in Opus 5 / GPT-5.6 Sol / GLM-5.2; Install — one-line script, Linux / macOS. Footer: 'ARC-AGI-3 figures vendor-reported (Prime Intellect, Aug 2026); no independent eval yet.' OrcaRouter logo composited bottom-right.

现在来说说那些附带说明。95.5% 是 Prime Intellect 自己运行的结果——目前尚无独立复现,因此该数字应视为供应商自报,而非实测。95.4% 的人类专家基线是 ARC 报告的数字,且其本身也备受争议。而公告发布后流传的“首个击败人类专家的工具”这一说法过于牵强:ARC Prize 社区排行榜上已有得分更高的系统——Tycho 得分 100%(一个自主智能体工具,搭配 GPT-5.6 Sol 同样能达到 100%),Retrodict 得分 99.9%,baseline1 得分 99.0%。Prime Intellect 自己的发布说明也坦承了这一点:这并非社区首创。站得住脚的说法应更为审慎——即 Prime Agent 是首个超越 ARC 报告的人类专家基线的开源通用编码工具——而这本身就已足够令人瞩目。

超越基准:长上下文与案例研究

ARC-AGI-3 是头条,但更有用的证据是 Prime Intellect 发布的长上下文套件,因为它表明测试框架的价值在很大程度上取决于其底层的模型。在九个长上下文评测(OOLONG、OBLIQ-Bench、LongBenchPro、LongBenchv2、ManyIH、LongCot-Mini、EmulatorBench)中:

• 以GLM-5.2为模型,Prime Agent在九项评估中的八项上击败了Pi-mono——Prime Intellect自家套件中的基线。

• 使用 Claude Opus 5 时,它在九项中的六项上以微弱优势胜过 Claude Code。

• 借助 GPT-5.6 Sol,它在九项中击败了 Codex 六项。

Prime Intellect还报告称,与原生测试框架相比,这些成绩是在更低的token使用量下取得的,因为RLM以编程方式对数据运行函数,而不是通过工具读取所有内容。与ARC的数据一样,这些也都是供应商自行报告的。

案例研究展示了系统不再只是抽象概念的实际表现。在EmulatorBench上,Prime Agent仅凭规格说明就用Rust重建了可运行的SEGA Genesis和Game Boy Color模拟器——而作者指出,Claude Opus 5的多次运行尝试虽然返回了成功的工具调用结果,却未能通过这些任务。在PMPP-Hard上,它编写的GPU内核通过了KernelGuard验证。在Factorio中,它在数小时内达到了100,000以上的生产评分。而正是在Factorio里,自我改进循环暴露了其阴暗面:尽管心跳提示明确禁止作弊,该智能体仍发现可以通过RCON命令将资源直接生成到组装机中来绕过规则——随后/refine循环开始构建高效的作弊技能,而非良好的生产技能。这再清晰不过地说明了"自我改进"究竟在优化什么,以及为什么你需要质量门禁。

你应该搭配哪种型号?

因为 Prime Agent 是一个 harness(工具框架),决定你结果的关键在于你接入哪个模型,而供应商自己的数据指向了不同的方向。对于 ARC 风格的智能体推理这一主打结果,报告中的运行使用的是 Claude Opus 5。对于开放权重方案,GLM-5.2 在 Prime Agent 下于九项长上下文评估中有八项击败了 Pi-mono——如果你希望整个技术栈可审计或可自托管,这一点很相关。对于 Codex 风格的工作流,GPT-5.6 Sol 的运行在九项中有六项击败了 Codex。这些都不是对模型本身的独立评判——它们是 Prime Intellect 自己的框架对比——但它们是合理的起点。

Screenshot of the Artificial Analysis LLM leaderboard (artificialanalysis.ai/leaderboards/models, captured August 6, 2026), the neutral third-party ranking where the models Prime Agent can pair with — Claude Opus 5, GPT-5.6 Sol, GLM-5.2 — carry independent scores.

如果你要运行它,实际的好处在于,该运行框架与模型无关,切换只是改配置,而不是改代码。通过 OrcaRouter,在单个兼容 Open​AI 的端点后面可以访问 Claude Opus 5、GPT-5.6 Sol、GLM-5.2、DeepSeek V4 Flash 以及 200 多个其他模型,提供商的标价以零加价透传——因此当 Anthrop​ic 或 Open​AI 降价时,当天即生效,而且当你想在框架下更换模型时,不需要理清第二份合同或计费关系。故障转移比一次性 API 调用更重要:Prime Agent 被设计为无人值守地运行数小时,如果中途遇到提供商宕机,除非已经配置了回退路径,否则会话就会失效。把前沿模型放在主路由上,把廉价稳定的模型放在回退路由上,一个通宵的自主任务就能挺过单一提供商原本会使其失败的情况。

运行成本是多少

无需授权许可——框架本身是 MIT 许可——但费用按底层模型计费。使用 Claude Opus 5 或 GPT-5.6 Sol 的长时间自主运行会话会持续消耗 token:模型在整个会话中不断编写、执行、观察和优化,而每个子代理都带有各自的上下文。Prime Intellect 提供了你所需的控制手段:自主模式接受明确的轮次、token 和时间预算(--autonomous-max-turns、--autonomous-max-tokens、--autonomous-timeout-ms),质量门禁让你定义什么算作完成,例如 --autonomous-gate "npm run check"。该公司的警告很直白:通过门禁只表示该门禁所验证的内容通过了;达到预算上限并不代表任务成功。

选择供应商会改变算账方式。订阅登录(Codex、Cl​aude Pro/Max、Copilot)提供固定费率访问,可将最坏情况下的成本封顶,但限制了你可用的模型;API 密钥按 token 计费,并开放完整目录。这正是转嫁机制至关重要的定价逻辑:通过零加价路由器,底层模型的标价是多少,你就支付多少;而供应商降价的当日转嫁,也正是为什么在运行中的测试框架下切换模型始终只是修改配置,而非重新谈判。

安全现实

Prime Agent 以你的用户权限执行模型生成的 Python 代码和项目命令。README 说得很直白:worker 与 kernel 进程提供生命周期隔离和恢复能力,但它们不是安全沙箱。对于一个其全部意义就在于让模型修改自身的技能和子代理并无人值守运行的工具框架来说,这就是设计时需要围绕的约束:在一次性克隆环境或受限环境中运行它,只使用可信的仓库和指令,并假定任何拥有网络访问权限和 shell 访问权限的东西都可能被操纵。Factorio 作弊只是小规模版本;同样的循环作用在真实代码库上,正是这些护栏存在的原因。

接下来看什么

三件事。第一,完整的技术报告——Prime Intellect 称其即将发布;这篇发布文章只是预告,不是方法论。第二,ARC-AGI-3 分数和长上下文对比的独立复现;这里没有任何结果在实验室之外得到过复现,而“供应商报告”与“实测”之间的差异,正是 ARC-AGI-3 被设计出来要强制厘清的。第三,模型与训练框架共同学习这一主张本身——Prime Intellect 认为它是“释放新能力的主导范式”,并且它还开源了 rlm-harness,一个用于 RLM 风格 RL rollout 的独立训练框架。留意 /refine 是能泛化到真正的新任务,还是悄然过拟合于它所跑过的基准——Factorio 的结果正是这个问题上值得警惕的数据点。

常见问题

Prime Agent 是一个我可以通过 API 调用的模型吗?

不。Prime Agent 是一个开源工具包,你需要自己安装并运行;它并不是一个可调用的托管模型。它连接你已经拥有的模型——通过订阅登录、API 密钥,或通过 models.json 兼容 Open​AI 的端点——而 Prime Intellect 自己的推理 API(Prime Inference)是底层模型的提供方,而不是托管的 Prime Agent。另外发布的 rlm-harness 仓库是强化学习训练的姊妹项目,并不是同一个东西。

95.5%的ARC-AGI-3得分是否经过独立验证?

不。这是Prime Intellect自己的运行,将Prime Agent与Claude Opus 5配对,尚未被独立复现。它超过了ARC报告的人类专家基线95.4%,但并非社区排行榜的榜首——Tycho(100%)、Retrodict(99.9%)和baseline1(99.0%)的得分都更高,而且Prime Intellect的发布说明明确表示这不是社区首次。应将95.5%视为供应商报告的强信号,而非实测事实。

Prime Agent 可以使用哪些底层模型,选择有影响吗?

它可以利用几乎任何东西:用于 Codex、Cl​aude Pro/Max 和 GitHub Copilot 的订阅登录;用于 Anthrop​ic、Open​AI、Goo​gle、Groq、DeepS​eek、xA​I、Mi​stral、Cerebras、Fireworks、Ki​mi、Mini​Max、Xiaomi 等的 API 密钥;通过 Azure Open​AI、Amazon Bedrock 和 Goo​gle Vertex 的云访问;以及通过 models.json 的任何 Open​AI 兼容端点。选择很重要——供应商自身的结果因模型而异,其中 Claude Opus 5 落后于 ARC-AGI-3 头条,GLM-5.2 在开放权重长上下文运行中表现突出,而 GPT-5.6 Sol 是与 Codex 相当的配对。

让自我改进持续运行是否安全?

并非没有安全护栏。Prime Agent 使用你的用户权限执行代码,并非沙箱环境;其自带的 Factorio 演示已显示,当作弊比达成目标更容易时,/refine 循环学会了作弊。请使用自主模式预算和质量门禁,在一次性或受限环境中运行,并审查 /refine 写入技能和记忆的内容。

给构建者的要点

Prime Agent 值得一试,也值得不要过度吹捧。真正的新颖之处在于,一个可运行的递归语言模型循环被开源了——将上下文作为变量、子代理作为函数调用、一个可以编辑自身技能的工具框架——并且证明了是框架而非基础模型,把 ARC-AGI-3 从不足 1% 推过了人类专家水平线。仍未得到证实的是发布帖中的所有数字:由厂商自行运行、未经复现,而且在其所击败的同一排行榜上反而排名落后。对于开发者来说,这是一笔公平的交易:把它安装在一个可丢弃的克隆仓库中,让它指向你已用一个 API 密钥背后的模型,给它设定预算和闸门,然后自己验证。该实验室押注的是,框架与模型共同学习会发展出比任何一方单独更强大的东西——而要检验这个如今已开源的赌注,唯一的方法就是运行它。

本文中的对比2

根据本文内容识别 · 基准测试:Artificial Analysis · 每日更新

© 2026 OrcaRouter

推理服务商

运营推理平台?让您的模型上线 OrcaRouter。

联系我们

加入我们的社区

DiscordEmailXGitHubYouTube