ComfyUI MiniMax H3 Director:像剪辑视频一样生成 AI 电影

插件2个月前更新 小马良
335 0

在 ComfyUI 中构建复杂的 MiniMax H3 工作流通常是一场噩梦:你需要手动计算 17k+5 的帧网格,为每个参考图像连接条件控制节点,并在一个巨大的提示框中塞入所有镜头的描述。

  • GitHub:https://github.com/seesee75-commits/ComfyUI-MiniMaxH3-Director

同类插件:

  • ComfyUI MiniMax H3 Director:https://github.com/AIMixer/ComfyUI_MiniMaxH3_Director
  • ComfyUI-MiniMaxH3-ChainDirector:https://github.com/luxu1999/ComfyUI-MiniMaxH3-ChainDirector

ComfyUI MiniMax H3 Director 将时间线编辑器的直观体验带入 ComfyUI,让你通过拖放图像、视频和音频到轨道上,可视化地构建故事板。不再是面对冰冷的节点连线,而是像在 Premiere 或 Final Cut 中一样,通过剪辑镜头、编写分镜提示词,一键生成连贯的音视频内容。

ComfyUI MiniMax H3 Director:像剪辑视频一样生成 AI 电影

核心功能:从“节点连线”到“轨道剪辑”

1. 可视化时间线编辑器

  • 多轨道管理:支持主视频轨道、参考视频轨道和音频轨道。
  • 拖放操作:将图像拖入轨道即成为关键帧(首/尾帧)或 <Picture i> 角色参考;拖入音频则作为背景音乐或参考声源。
  • 实时编译:当你调整镜头顺序、裁剪时长或修改提示词时,节点会自动编译出模型最终接收的完整 Prompt。你可以在运行前通过 COMPILED PROMPT 面板预览并修正错误。

2. 智能模型切换

MiniMax H3 拥有两个独立的扩散检查点,Director 通过工具栏开关自动选择:

  • Refs OFF (fl2va):用于文本转视频及首/尾关键帧控制。
  • Refs ON (ref2va):用于处理角色槽位、参考图像/视频/音频的多模态生成。
    你只需将两个模型都连接到 Director,它会根据当前轨道上的素材类型自动路由,无需手动更换节点。

3. 高级编辑与重拍

  • 局部重拍 (Retake):如果某个镜头不满意,可以使用 MiniMax H3 Retake Stitch 节点重新生成该片段,并无缝拼接回原视频。
  • 长视频渲染:MiniMax H3 Director Chain 支持渲染超出单个 H3 镜头时长的完整时间线,自动处理分块与衔接。
  • 去噪预览:MiniMax H3 Preview Override 允许你在生成过程中观看整个镜头的去噪演变,而非仅看单帧冻结画面。

4. 角色管理与 VLM 辅助

  • 角色槽位:支持 @char1, @char2 等占位符,方便在多镜头中保持角色一致性。
  • VLM 分析:内置可选的本地 VLM(如 Ollama/LM Studio)“Analyze”按钮,可自动分析上传的参考图并生成描述性提示词,同时智能释放 VRAM 以保障生成性能。

系统要求与安装

硬件门槛

  • VRAM:fp8 检查点约 21 GB。16 GB VRAM 可通过 ComfyUI 卸载机制在 480p–768p 分辨率下运行;低于此配置预计会出现大量内存交换。
  • 磁盘空间:建议预留约 60 GB,用于存放两个扩散检查点、文本编码器及 VAE。
  • ComfyUI 版本:必须 ≥ 0.30.0(引入 H3 支持及打包 AV 隐空间)。

快速安装

推荐通过 ComfyUI Manager 搜索 MiniMax H3 Director 进行安装。若未列出,可使用 Git URL 安装:

cd ComfyUI/custom_nodes
git clone https://github.com/seesee75-commits/ComfyUI-MiniMaxH3-Director

注意:安装后请硬刷新浏览器(Ctrl+F5)以加载前端扩展。

模型准备

从 HuggingFace 下载 MiniMax-H3 模型,并直接放入 models/diffusion_models/MiniMax-H3/ 文件夹(勿建子文件夹)。建议同时下载 minimax_h3_fl2va_* 和 minimax_h3_ref2va_* 两个版本的检查点。

© 版权声明

相关文章