黑森林实验室与英伟达合作:推动 FLUX 模型的普及与创新

黑森林实验室(Black Forest Labs)与英伟达(NVIDIA)的合作标志着在使 FLUX 模型 更加普遍可访问和高效方面迈出了重要一步。通过优化模型性能、减少显存需求、支持更多显卡种类以及为 3D 环境提供新功能,双方共同扩大了全球创作者、开发者和爱好者的社区。

革命性的性能提升

FP4 计算支持与 GeForce RTX 50 系列显卡

黑森林实验室的 FLUX 模型 现已针对最新的 GeForce RTX 50 系列英伟达 进行了优化,这些 显卡基于英伟达的 Blackwell 架构,引入了对 FP4(浮点 4 位)计算 的支持。这一创新使得 FLUX 模型能够在 RTX AI PC 上实现前所未有的性能突破。

  • 显著的效率提升:例如,FLUX.1 [dev] 版本仅需 10GB 的显存,而在 GeForce RTX 5090 上的性能比使用普通 BF16(Brain Floating Point 16 位)GeForce RTX 40902 倍。这意味着创作者可以在他们的 RTX AI PC 上更快地生成更多高质量图像,同时减少了对硬件资源的需求。
  • 更低的内存占用:通过 FP4 计算的支持,FLUX 模型能够更高效地利用显存,降低了对显存的要求,使得更多的用户可以在中端或高端显卡上运行复杂的生成任务。

上面的图像使用 FLUX.1 [dev] FP4 生成

3D 创作的新可能性

英伟达AI 蓝图:3D 引导的生成式 AI

为了进一步扩展 FLUX 模型的应用场景,黑森林实验室与 英伟达合作推出了英伟达AI 蓝图,这是一个专门用于 3D 引导的生成式 AI 的工作流程。该蓝图允许用户通过在 Blender 等 3D 应用程序中布置场景来引导图像生成,并使用该构图与 FLUX NIM 微服务 生成符合场景的图像。

  • 简化的工作流程:用户可以在 3D 应用程序中设计场景,然后将这些场景传递给 FLUX NIM 微服务,生成与场景相匹配的高质量图像。这种集成简化了图像生成的控制,使得 3D 创作者可以更轻松地将生成式 AI 集成到他们的工作流程中。
  • 广泛的应用场景:无论是建筑设计、游戏开发还是虚拟现实(VR)内容创作,英伟达AI 蓝图都为 3D 创作者提供了强大的工具,帮助他们快速生成符合预期的视觉效果。

更广泛的可用性和访问

黑森林实验室致力于让其社区能够轻松访问这些创新技术。以下是即将推出的关键发布计划:

  1. FLUX 模型 FP4 格式:优化后的 FLUX 模型将于 2 月初 以 FP4 格式在 Hugging Face 上提供,供全球开发者和研究人员下载和使用。
  2. FLUX NIM 微服务ComfyUI 和 ai.nvidia.com:FLUX NIM 将于 2 月 通过 ComfyUI 和 ai.nvidia.com 提供,方便用户将其集成到现有的生成式 AI 工作流程中。
  3. 英伟达 AI 蓝图:用于 3D 引导的生成式 AI 的英伟达AI 蓝图将于 2 月 通过 GitHub 提供,并附带一键安装程序,确保用户可以快速上手并开始使用。

FLUX.1 [dev] BF16 (左) 和 FP4 (右) 的比较

未来展望

黑森林实验室与英伟达的合作不仅带来了性能上的巨大提升,还为创作者和开发者提供了更多的工具和功能,帮助他们在 3D 和 2D 创作中取得更好的成果。随着 FP4 计算的支持和 3D 引导生成式 AI 的推出,FLUX 模型将继续推动媒体创作的可能性边界。

0

评论0

没有账号?注册  忘记密码?