论文:MaD-RSI: Model-as-Data for Recursive Self-Improvement of Agent Harnesses
作者与团队: Yu Cui、Hong He 等;北京理工大学、清华大学、中科院成都计算所 / 国科大、北京工业大学等。2026,v1
问题
为某一个模型优化的 Harness 可能只适配这个模型。换用新模型时,可能需要重新优化。
做法
- 对齐轨迹:收集多个冻结模型在同一任务集、相同采样设置下的轨迹,并逐任务对齐。
- 挑选任务:按”模型间是否有分歧”(有的成功、有的失败)和覆盖情况,挑出信息量大的任务。
- 联合诊断:把这些对齐后的轨迹一起交给优化器,修改同一份共享 Harness。
- 推理使用:推理时各模型独立使用这份 Harness,不做多模型投票。
结果
(4 个模型,LawBench,Table 1):
| 指标 | 含义 | 原始 | 共享优化 | 单模型优化中最佳 |
|---|---|---|---|---|
| Pass^4 | 4 个模型全部成功 | 42.50% | 48.00% | 43.50% |
| Pass@4 | 至少 1 个模型成功 | 62.50% | 73.00% | — |
这两个指标都是跨模型统计,不是常见的”单模型尝试 k 次”的 pass@k,不要混淆。
多模型共享优化的成本对照见综述第 5 章,避免与单次部署费用混算。
更新于 2026-11-09 · 研究方法