skill-improver - 通过验证实验优化技能
通过二元评测运行技能、诊断失败、测试受控修改,并仅保留经过验证的改进。
标签
更新于: 2026-10-01该技能可以做什么
- 审计目标技能
- 收集评测设置
- 建立性能基线
- 使用二元评测打分
- 根据完整轨迹诊断失败
- 选择帕累托前沿父版本
- 提出受控技能修改
- 使用PACE验证修改
- 封存优化后的技能版本
输入
- 目标技能路径
- 测试输入
- 二元评测标准
- 模型配置
- 每次实验运行次数
- 预算上限
- 黄金案例
- 输出版本名称
- 现有检查点
输出
- 改进后的技能副本
- 技能基线副本
- TSV结果日志
- 修改变更日志
- 实时HTML仪表板
- 执行轨迹
- 检查点文件
- 最终测试分数
要求
- 目标技能文件
- skill-audit命令
- 文件读写权限
- 已配置的优化器模型
- 已配置的目标模型
- Python运行环境
- 浏览器访问权限
