sense - 从讲座视频提取可索引知识
解析字幕、提取并 OCR 关键帧、映射技能,并将带时间戳的结果存储到 DuckDB。
标签
更新于: 2026-10-06能力
典型输入
典型输出
该技能可以做什么
- 解析 VTT 和 SRT 字幕
- 检测幻灯片时间戳
- 提取视频帧
- 将图表 OCR 为 LaTeX
- 将内容映射到技能
- 平衡技能 trit
- 将索引数据存入 DuckDB
- 创建时间线视图
输入
- 讲座视频文件
- VTT 或 SRT 字幕文件
- 输出 DuckDB 路径
输出
- 带时间戳的转录记录
- 提取的视频帧文件
- OCR 文本和 LaTeX
- 带 trit 的技能映射
- DuckDB 索引和时间线视图
要求
- Ruby 或 Python 运行时
- ffmpeg
- DuckDB 支持
- 字幕解析库
- Mathpix API 凭据
