curate-scanner-evaluation-corpus - 构建与维护扫描器评估语料库
挑选并固定第三方仓库,确定标注范围,准备人工复核工作包,维护真值数据集并裁决标签变更。
标签
更新于: 2026-09-16能力
典型输入
典型输出
该技能可以做什么
- 筛选具有覆盖度的候选仓库
- 定义详尽的标注范围与规则
- 准备人工复核工作包
- 裁决真值标注记录
- 修正已被争议的真值标签
- 保护评估指标的完整性
输入
- 第三方代码仓库
- 固定的 Commit 哈希
- 分类标准定义
- 标注范围与排除规则
输出
- 候选仓库筛选理由
- 声明的标注范围与排除规则
- 人工复核工作表
- 已接受的真值数据
- 语料库变更记录
- 评估摘要
