deduplication - 具有规范选择和声誉评分的事件去重
使用基于ID和内容的去重方法,从多个来源中删除重复事件,并进行规范选择
标签
更新于: 2026-02-11能力
典型输入
典型输出
该技能可以做什么
- 生成去重键
- 计算声誉分数
- 分组相似内容
- 选择规范文章
- 计算减少百分比
输入
- 文章对象
- 事件ID
- 来源结果
- 域名
- 发布日期
输出
- 去重后的项目
- 减少指标
- 规范选择
- 来源归属
要求
- TypeScript/JavaScript运行环境
- 哈希生成能力
- 多个数据源
使用基于ID和内容的去重方法,从多个来源中删除重复事件,并进行规范选择
标签
更新于: 2026-02-11能力
典型输入
典型输出