
对于从事 AI 视频模型训练或大规模视频内容管理的开发者而言,数据集的整理、清洗和标注往往是一项繁琐且耗时的工作。Klippbok-MCP 旨在通过模型上下文协议(MCP)将这一过程完全自动化。
这是一个社区驱动的 MCP 服务器,它将 Klippbok(由 Alvdansen Labs 开发的视频数据集整理 CLI 工具)的完整流水线——包括扫描、分类、摄取、标准化、字幕生成、评分、提取、审核、验证和整理——封装为类型化的 MCP 工具。这意味着,你可以直接让 Claude Desktop、Claude Code、Cursor 或其他兼容 MCP 的 AI 代理为你驱动整个数据集整理流程。
核心功能:全流程自动化封装
Klippbok-MCP 提供了丰富的工具集,覆盖视频处理的每一个环节:
| 工具名称 | 功能描述 |
|---|---|
klippbok_check_installation | 环境检查:探测 Klippbok、FFmpeg 和 Python 环境。建议首先运行此工具。 |
klippbok_scan | 扫描诊断:对剪辑目录进行只读质量诊断,识别潜在问题。 |
klippbok_triage | 智能分类:利用 CLIP 匹配技术,生成分类清单,自动标记视频内容。 |
klippbok_ingest | 场景分割:基于分类清单,对长视频进行精确的场景分割。 |
klippbok_normalize | 标准化处理:统一预分割剪辑的 FPS 和分辨率,确保数据一致性。 |
klippbok_caption | 字幕生成:调用 VLM(视觉语言模型)生成 `.txt侧边卡文件*(需 API 密钥)。 |
klippbok_score | 质量评分:本地启发式检查字幕质量,快速筛选低质数据。 |
klippbok_extract | 帧提取:导出 PNG 参考帧,用于可视化预览或进一步分析。 |
klippbok_audit | 智能审计:使用 VLM 重新生成字幕并进行差异对比,确保准确性(需 API 密钥)。 |
klippbok_validate | 完整性验证:检查数据集的完整性和质量指标。 |
klippbok_organize | 最终整理:按照特定训练器要求的布局结构整理文件。 |
klippbok_read_manifest | 清单解析:读取并总结分类清单,支持多种分析模式。 |
klippbok_update_manifest | 手动修正:修改 include/exclude 标志,保存审核结果。 |
智能协作:AI 代理如何帮你工作?
Klippbok-MCP 不仅提供工具,还内置了专门的提示词(Prompts)和资源指南,帮助 AI 代理更聪明地执行任务:
plan_dataset_pipeline:根据你的训练目标(如微调 SVD、训练 T2V 模型等)和源材料特点,AI 会自动规划最佳的整理流水线步骤。review_triage_results:AI 会读取分类清单,分析分数分布,标记可疑条目,并建议后续的更新操作,无需人工逐条检查。- 资源指引:通过
klippbok://pipelinesURI,AI 可以访问 Markdown 指南,了解如何将特定的训练目标映射到具体的工具调用序列。
快速开始指南
1. 前置要求
- 已安装 Klippbok CLI 工具(需单独安装,详见 Alvdansen Labs 项目)。
- 已安装 Python 和 UV(推荐包管理器)。
2. 安装 Klippbok-MCP
git clone https://github.com/hoodtronik/klippbok-mcp
cd klippbok-mcp
uv sync
3. 配置环境变量
服务器通过环境变量读取配置,API 密钥不会写入磁盘,确保安全性:
| 变量 | 用途 | 默认值 |
|---|---|---|
KLIPPBOK_PYTHON | 安装了 Klippbok 的 Python 解释器路径 | sys.executable |
GEMINI_API_KEY | 使用 Gemini 作为 VLM 提供商时需要 | — |
REPLICATE_API_TOKEN | 使用 Replicate 作为 VLM 提供商时需要 | — |
4. 注册到 Claude Desktop
在 Claude Desktop 的配置文件中添加服务器配置,指向 Klippbok-MCP 的可执行文件。重启客户端后,Klippbok 工具将出现在服务器选择器中。
5. 首次运行
建议首先询问代理运行 klippbok_check_installation,以验证所有依赖项是否正确安装。
注意事项
- 非官方组件:Klippbok-MCP 是独立的社区配套工具,不捆绑、不修改 Klippbok,也不是其官方组成部分。
- 问题反馈:Klippbok CLI 本身的问题请提交至上游仓库;MCP 服务器相关的具体问题请提交至本仓库。
- API 成本:使用
klippbok_caption和klippbok_audit等功能时,会调用第三方 VLM API(如 Gemini 或 Replicate),请注意控制成本。
Klippbok-MCP 将复杂的视频数据处理流程转化为 AI 代理可理解的自然语言指令。无论是个人开发者还是团队,只需通过对话即可实现从原始视频到高质量训练数据集的全自动转化。这不仅大幅提升了效率,更降低了视频数据工程的技术门槛,让创作者能更专注于模型训练本身。
相关导航


Klavis AI

UltraRAG

Data Commons MCP

Office-PowerPoint-MCP-Server

MCP Gateway

MATLAB Agentic Toolkit







