prompt-engineer-toolkit - LLM提示工程与测试工具包
对提示进行A/B测试、版本管理，并为生产LLM工作流确保回归安全
标签
更新于: 2026-03-23能力
典型输入
典型输出
该技能可以做什么
- 运行提示A/B测试
- 对提示输出评分
- 跟踪提示版本
- 比较提示版本
- 创建提示模板
- 运行回归测试
- 审计提示质量
- 计算提示指标
输入
- 测试用例JSON文件
- 基准提示文件
- 候选提示文件
- LLM运行命令
- 提示名称
- 变更说明
输出
- A/B测试结果
- 提示版本历史
- 版本差异报告
- 质量指标报告
- 提示审计报告
要求
- Python 3运行环境
- 本地脚本执行
- LLM命令行接口
- JSON配置支持
- 本地文件系统访问