nlp - 选择分词器、模型架构与 NLP 指标
指导 NLP 任务中的分词器选择、Transformer 架构选择、句子嵌入生成和评估指标匹配。
标签
更新于: 2026-09-28能力
典型输入
典型输出
该技能可以做什么
- 选择分词算法
- 选择 Transformer 架构
- 评估分类输出
- 对齐 NER 标签
- 评估生成指标
- 生成句子嵌入
输入
- NLP 任务需求
- 文本样本
- 模型检查点
- 参考文本
- 评估结果
输出
- 分词器建议
- 架构建议
- 指标建议
- NER 评估指导
- 句子嵌入
要求
- 兼容 Transformers 的模型检查点
- Python Transformers 库
- 用于 NER 评估的 seqeval
- 用于句子嵌入的 sentence-transformers