FLUX.1-dev-ControlNet-Union-Pro-2.0：Shakker Labs发布的新一代ControlNet，功能升级，性能优化！

Shakker Labs近期发布了FLUX.1-dev-ControlNet-Union-Pro-2.0，这是FLUX.1-dev模型的升级版统一ControlNet。该版本在功能和性能上都进行了显著优化，支持7种控制模式，包括canny、soft edge、depth、pose、gray等，为用户提供了更强大的图像生成和控制能力。

• 模型地址：https://huggingface.co/Shakker-Labs/FLUX.1-dev-ControlNet-Union-Pro-2.0
• 网盘下载：https://www.123865.com/s/hyQyTd-HHHDv 提取码:JqrF

关键说明

与FLUX.1-dev-ControlNet-Union-Pro相比，新版本进行了以下改进：

• 移除模式嵌入：模型体积更小，运行效率更高。
• 改进模式：对canny和pose模式进行了优化，提升了控制力和生成图像的美观度。
• 新增支持：新增soft edge模式，移除了对tile模式的支持，进一步丰富了应用场景。

模型卡片

• 结构：包含6个双块，0个单块，模式嵌入已被移除。
• 训练细节：
  • 训练步数：30万步。
  • 数据集：包含2000万高质量通用和人体图像。
  • 分辨率：512x512。
  • 格式：BFloat16。
  • 批次大小：128。
  • 学习率：2e-5。
  • 引导值：从[1, 7]均匀采样。
  • 文本丢弃率：0.20。
• 功能：支持多种控制模式，包括canny、soft edge、depth、pose、gray等。用户可以像使用普通ControlNet一样使用它，并且可以与其他ControlNet联合使用。

推荐参数

为了获得更好的控制效果和细节保留，建议根据不同的控制模式调整以下参数：

• Canny：
  • 使用cv2.Canny。
  • controlnet_conditioning_scale=0.7。
  • control_guidance_end=0.8。
• Soft Edge：
  • 使用AnylineDetector。
  • controlnet_conditioning_scale=0.7。
  • control_guidance_end=0.8。
• Depth：
  • 使用depth-anything。
  • controlnet_conditioning_scale=0.8。
  • control_guidance_end=0.8。
• Pose：
  • 使用DWPose。
  • controlnet_conditioning_scale=0.9。
  • control_guidance_end=0.65。
• Gray：
  • 使用cv2.cvtColor。
  • controlnet_conditioning_scale=0.9。
  • control_guidance_end=0.8。

使用建议

• 多条件控制：为了更高的稳定性，建议使用多条件控制。
• 参数调整：根据实际需求，灵活调整controlnet_conditioning_scale和control_guidance_end，以达到最佳效果。