论文:MaD-RSI: Model-as-Data for Recursive Self-Improvement of Agent Harnesses

作者与团队: Yu Cui、Hong He 等;北京理工大学、清华大学、中科院成都计算所 / 国科大、北京工业大学等。2026,v1

问题

为某一个模型优化的 Harness 可能只适配这个模型。换用新模型时,可能需要重新优化。

做法

  1. 对齐轨迹:收集多个冻结模型在同一任务集、相同采样设置下的轨迹,并逐任务对齐。
  2. 挑选任务:按”模型间是否有分歧”(有的成功、有的失败)和覆盖情况,挑出信息量大的任务。
  3. 联合诊断:把这些对齐后的轨迹一起交给优化器,修改同一份共享 Harness。
  4. 推理使用:推理时各模型独立使用这份 Harness,不做多模型投票。

结果

(4 个模型,LawBench,Table 1):

指标 含义 原始 共享优化 单模型优化中最佳
Pass^4 4 个模型全部成功 42.50% 48.00% 43.50%
Pass@4 至少 1 个模型成功 62.50% 73.00% —

这两个指标都是跨模型统计,不是常见的”单模型尝试 k 次”的 pass@k,不要混淆。

多模型共享优化的成本对照见综述第 5 章,避免与单次部署费用混算。


返回 RSI 专题 · 检索论文与资料

更新于 2026-11-09 · 研究方法