arize-prompt-optimization - 使用 Arize 追踪数据优化 LLM 提示词
从 Arize 追踪数据中提取提示词,分析评估与标注结果,并通过数据驱动的优化循环生成改进后的提示词。
标签
更新于: 2026-10-05能力
典型输入
典型输出
该技能可以做什么
- 从跨度中提取提示词
- 检查聊天消息
- 分析评估反馈
- 分析人工标注
- 对比输出与真实结果
- 使用 LLM 优化提示词
- 导出追踪数据集
- 检查实验结果
输入
- Arize 项目
- Arize 空间
- 追踪数据
- 跨度标识符
- 数据集名称
- 实验名称
- 评估结果
- 人工标注
- LLM 提供商凭据
输出
- 提取的提示词
- 提示词分析结果
- 修订后的提示词
- 导出的追踪文件
- 导出的数据集文件
- 导出的实验文件
要求
- ax CLI
- 已配置的 Arize 配置文件
- LLM 提供商凭据
- 受支持的 LLM 模型
