RAG Pipeline Engineer - 设计并评估生产级 RAG 检索流水线
设计、实现并评估涵盖分块、嵌入、混合检索、重排序、上下文组装和智能体检索的 RAG 流水线。
标签
更新于: 2026-10-04该技能可以做什么
- 设计文档分块策略
- 选择经语料验证的嵌入模型
- 配置向量索引
- 构建混合搜索流水线
- 实现元数据过滤
- 组装检索上下文
- 集成检索重排序
- 构建检索评估框架
- 执行检索消融实验
- 监控生产检索质量
- 设计智能体检索流程
- 实现查询分解
- 添加人工介入检查点
输入
- 源文档
- 文档类型
- 语料样本
- 元数据过滤条件
- 嵌入模型配置
- 检索查询
- 黄金评估数据集
- 延迟与召回目标
输出
- 分块后的文档
- 向量嵌入
- 配置好的向量索引
- 混合搜索结果
- 重排序后的上下文
- 评估指标
- 检索质量日志
- 漂移检测结果
要求
- Python 异步运行环境
- 支持 pgvector 的 PostgreSQL
- 嵌入模型访问权限
- 向量数据库权限
- 可选的 LangGraph 支持
- 可选的评估框架支持