论文:RRSI: Regularized Recursive Self-Improvement of Agent Harnesses
作者与团队: Peng Xia 等;Google Cloud AI Research(谷歌云 AI 研究团队),联合 斯坦福大学、Washington University in St. Louis、UNC 等。2026,v3
问题
- 演化分数提高可能来自对开发题目细节的过拟合,甚至混入题目特定规则。
- 候选会不断膨胀,执行消耗越来越高。
做法
约束分布在提议和选择两个环节,而不是只依靠一个 critic 把关。
-
提议侧:
- 逐轮收紧每次允许的编辑数量。
- 根据历史证据(哪些组件的修改曾带来收益)分配修改。
- 主动探索尚未尝试过的组件。
-
选择侧:
- 筛查候选是否泄漏了具体题目内容。
- 结合分数波动和复杂度决定是否接受。
- 对已接受的候选,剪掉不带来收益的改动。
结果
(Opus 4.8,工作空间任务实验,Table 2):在 Harvey LAB 上演化,OOD 平均分为 JobBench / GDPval / APEX-Agents 三个基准的均值。
| 版本 | 三个未参与演化基准的均分 | 每次任务运行的 token |
|---|---|---|
| 原始 H0 | 39.7 | 1.56M |
| 无正则演化 | 40.3 | 3.80M |
| RRSI | 43.6 | 2.42M |
适用范围
RRSI 的 token 消耗低于无正则方案,但高于原始 H0。论文用多个未参与演化的基准衡量泛化,而不是用单一开发集分数代表泛化。
延伸阅读:RRSI 作者项目解读(正则约束、结果与演化记录)。
更新于 2026-11-09 · 研究方法