engineering-data-scraper - 全自动 AI 驱动的数据采集 Agent
构建自动化的数据采集 Agent，可定时抓取网页数据，使用 Gemini Flash 进行 AI 增强并将结果存储到数据库。
标签
更新于: 2026-09-24能力
典型输入
典型输出
该技能可以做什么
- 抓取公开网络数据
- 使用 Gemini Flash 增强数据
- 将结果存储至数据库
- 从用户反馈中学习
- 按 URL 对数据去重
输入
- 目标数据源 URL
- Gemini API 密钥
- Notion API 令牌
- 配置文件
输出
- Notion 数据库页面
- 反馈 JSON 文件
- 环境变量模板文件
要求
- Python 运行环境
- Gemini Flash API 访问权限
- GitHub Actions 执行环境
- Notion API 访问权限