黑森林实验室(Black Forest Labs)与英伟达(NVIDIA)的合作标志着在使 FLUX 模型 更加普遍可访问和高效方面迈出了重要一步。通过优化模型性能、减少显存需求、支持更多显卡种类以及为 3D 环境提供新功能,双方共同扩大了全球创作者、开发者和爱好者的社区。
革命性的性能提升
FP4 计算支持与 GeForce RTX 50 系列显卡
黑森林实验室的 FLUX 模型 现已针对最新的 GeForce RTX 50 系列英伟达 进行了优化,这些 显卡基于英伟达的 Blackwell 架构,引入了对 FP4(浮点 4 位)计算 的支持。这一创新使得 FLUX 模型能够在 RTX AI PC 上实现前所未有的性能突破。
- 显著的效率提升:例如,FLUX.1 [dev] 版本仅需 10GB 的显存,而在 GeForce RTX 5090 上的性能比使用普通 BF16(Brain Floating Point 16 位) 的 GeForce RTX 4090 快 2 倍。这意味着创作者可以在他们的 RTX AI PC 上更快地生成更多高质量图像,同时减少了对硬件资源的需求。
- 更低的内存占用:通过 FP4 计算的支持,FLUX 模型能够更高效地利用显存,降低了对显存的要求,使得更多的用户可以在中端或高端显卡上运行复杂的生成任务。
3D 创作的新可能性
英伟达AI 蓝图:3D 引导的生成式 AI
为了进一步扩展 FLUX 模型的应用场景,黑森林实验室与 英伟达合作推出了英伟达AI 蓝图,这是一个专门用于 3D 引导的生成式 AI 的工作流程。该蓝图允许用户通过在 Blender 等 3D 应用程序中布置场景来引导图像生成,并使用该构图与 FLUX NIM 微服务 生成符合场景的图像。
- 简化的工作流程:用户可以在 3D 应用程序中设计场景,然后将这些场景传递给 FLUX NIM 微服务,生成与场景相匹配的高质量图像。这种集成简化了图像生成的控制,使得 3D 创作者可以更轻松地将生成式 AI 集成到他们的工作流程中。
- 广泛的应用场景:无论是建筑设计、游戏开发还是虚拟现实(VR)内容创作,英伟达AI 蓝图都为 3D 创作者提供了强大的工具,帮助他们快速生成符合预期的视觉效果。
更广泛的可用性和访问
黑森林实验室致力于让其社区能够轻松访问这些创新技术。以下是即将推出的关键发布计划:
- FLUX 模型 FP4 格式:优化后的 FLUX 模型将于 2 月初 以 FP4 格式在 Hugging Face 上提供,供全球开发者和研究人员下载和使用。
- FLUX NIM 微服务:ComfyUI 和 ai.nvidia.com:FLUX NIM 将于 2 月 通过 ComfyUI 和 ai.nvidia.com 提供,方便用户将其集成到现有的生成式 AI 工作流程中。
- 英伟达 AI 蓝图:用于 3D 引导的生成式 AI 的英伟达AI 蓝图将于 2 月 通过 GitHub 提供,并附带一键安装程序,确保用户可以快速上手并开始使用。
未来展望
黑森林实验室与英伟达的合作不仅带来了性能上的巨大提升,还为创作者和开发者提供了更多的工具和功能,帮助他们在 3D 和 2D 创作中取得更好的成果。随着 FP4 计算的支持和 3D 引导生成式 AI 的推出,FLUX 模型将继续推动媒体创作的可能性边界。
评论0