阿里妈妈旗下Creative团队推出重绘 Controlnet模型FLUX-Controlnet-Inpainting

阿里妈妈旗下Creative团队推出FLUX-Controlnet-Inpainting模型,这是 FLUX-dev 下的重绘 Controlnet模型,能很好的将图像中的蒙版区域重绘并完美融入。

ComfyUI 使用技巧:

  • 使用 t5xxl-FP16 和 flux1-dev-fp8 模型进行 28 步的推理过程,显存用量为 27GB。当 cfg 设为 3.5 时,推理时间为 27 秒;若不设置 cfg,则为 15 秒。可以使用 Hyper-FLUX-lora 来加速推理过程
  • 您可以尝试调整参数 control-strength、control-end-percent 和 cfg(适当降低)以获得更佳结果
  • 以下示例采用的参数为:control-strength = 0.9、control-end-percent = 1.0、cfg = 3.5

模型细节

  • 该模型基于分辨率为 768x768 的 12M laion2B 数据集和内部源图像进行训练。在该尺寸下进行推理能得到最佳效果,其他尺寸则效果稍逊。
  • 推荐将 controlnet_conditioning_scale 设置在 0.9 至 0.95 之间。
  • 请注意:目前发布的仅为训练过程中的 alpha 版本,我们将在准备就绪后推出更新版。
0

评论0

没有账号?注册  忘记密码?