langsmith-observability - 大语言模型应用的链路追踪、评估与监控平台
针对大语言模型应用提供执行链路追踪、模型输出数据集评估、生产指标监控与反馈管理功能。
标签
更新于: 2026-09-21能力
典型输入
典型输出
该技能可以做什么
- 追踪大语言模型应用调用
- 对比数据集评估模型输出
- 监控生产系统运行指标
- 管理数据集与测试用例
- 收集运行反馈与评分
- 从 Prompt Hub 拉取提示词
输入
- LangSmith API 密钥
- 大语言模型输入与查询
- 评估数据集与参考输出
- 用户反馈评分与评语
输出
- 层级化执行追踪与运行记录
- 评估指标与测试报告
- 已保存的数据集与样例
- 已记录的反馈条目
要求
- Python 运行环境
- langsmith Python 包(0.2.0 及以上版本)
- 有效的 LangSmith API 密钥
- 到 LangSmith 平台的网络连接
