ComfyUI-Veo2-Experimental:将谷歌文生视频模型Veo 2集成到ComfyUI中

插件1周前发布 小马良
61 0

ComfyUI-Veo2-Experimental是一个为ComfyUI设计的自定义节点,它将谷歌Veo 2强大的文生视频功能集成到ComfyUI中,为创作者提供了一个高效且富有创意的工具。

Veo 2 是一款由谷歌开发的先进文生视频模型,通过文本或图像提示生成高质量的视频。它支持多种电影和视觉风格,能够渲染帧间复杂细节,并提供真实世界物理模拟和细腻的运动精确度等功能。Veo 2 的主要功能包括:

  • 文本到视频生成:通过描述性文本提示创建视频。
  • 分辨率:以24帧/秒输出720p分辨率视频。
  • 宽高比:支持16:9和9:16等标准格式。
  • 最大视频长度:每段视频最长8秒。
  • 水印:视频使用SynthID水印以确保AI使用的道德性。
ComfyUI-Veo2-Experimental:将谷歌文生视频模型Veo 2集成到ComfyUI中

功能

ComfyUI-Veo2-Experimental扩展为用户提供了以下功能:

  • 使用Google Veo 2模型从文本提示生成视频。
  • 配置视频参数,如时长、宽高比和人物生成。
  • 将生成的视频保存到您的输出目录。
  • 将Veo视频转换为VHS兼容的图像格式以供进一步处理。

要求

在使用ComfyUI-Veo2-Experimental之前,请确保满足以下要求:

  • ComfyUI:建议使用最新版本。
  • Google Cloud API密钥:需要具有Veo 2访问权限的密钥。
  • Python:版本3.8及以上。
  • Google Generative AI Python SDK:通过pip install google-genai安装。

安装

按照以下步骤安装ComfyUI-Veo2-Experimental:

1、克隆仓库:将此仓库克隆到您的ComfyUI custom_nodes文件夹。

cd /path/to/ComfyUI/custom_nodes
git clone https://github.com/ShmuelRonen/ComfyUI-Veo2-Experimental

2、安装SDK:安装Google Generative AI SDK。

pip install --upgrade google-genai

3、获取API密钥:从Google AI Studio获取您的免费API密钥。

  • 访问 Google AI Studio
  • 使用您的Google账户登录。
  • 点击“获取API密钥”或进入设置。
  • 创建一个新的API密钥。
  • 复制API密钥以用于.env文件。

4、配置.env文件:在扩展目录中创建一个.env文件,填入您的Google API密钥。

GOOGLE_API_KEY=your_google_api_key_here

5、重启ComfyUI:完成上述步骤后,重启ComfyUI以使扩展生效。

使用方法

Veo 文本到视频

  • 在工作流中添加“Veo Text to Video”节点。
  • 输入描述您想要生成的视频的提示。
  • 配置以下参数:
    • 宽高比(16:9或9:16)
    • 人物生成设置(不允许或允许成人)
    • 时长(5-8秒)
  • 连接到“Veo Video Saver”以查看和保存结果。

Veo Video Saver

  • 连接来自Veo生成节点的视频输出。
  • 配置以下参数:
    • 保存到输出(true/false)
    • 文件名前缀
  • 执行以将视频保存到您的ComfyUI输出目录。

Veo to VHS

  • 将Veo视频转换为与其他ComfyUI视频处理节点兼容的格式。

注意事项

  • 视频生成可能需要几分钟时间。
  • 扩展实现了速率限制以避免配额错误。
  • 当前Google的API不支持图像到视频生成。
  • 最大视频时长为8秒。

故障排除

如果遇到“Google API密钥是必需的”错误,请按照以下步骤操作:

  • 检查您的.env文件是否位于正确位置。
  • 验证您的API密钥是否有效且具有Veo 2的访问权限。
  • 重启ComfyUI。
© 版权声明

相关文章

暂无评论

none
暂无评论...