不换模型，效果提升104%！上海AI Lab让Harness也能自进化了
摘要
上海AI Lab提出一种自进化Harness框架，无需更换模型即可通过搜索和验证迭代优化Harness，在多个基准测试上实现最高104%的效果提升。
核心要点
- 自进化Harness框架通过搜索和验证迭代优化，无需更换底层模型。
- 在多个基准测试中，效果提升最高达104%。
- 该方法可自动发现更优的提示策略或评估流程。
- 实验覆盖多种任务类型，包括推理、分类等。
- 与固定Harness相比，自进化Harness显著提升模型表现。
AI 洞察
这一方法意味着模型能力释放不再仅依赖模型本身，Harness的优化同样关键。未来，Harness自进化可能成为提升AI系统性能的标配手段，降低对模型迭代的依赖。