阿里妈妈旗下Creative团队推出FLUX-Controlnet-Inpainting模型,这是 FLUX-dev 下的重绘 Controlnet模型,能很好的将图像中的蒙版区域重绘并完美融入。
- GitHub:https://github.com/alimama-creative/FLUX-Controlnet-Inpainting
- 模型:https://huggingface.co/alimama-creative/FLUX.1-dev-Controlnet-Inpainting-Alpha
- 模型备份下载:https://www.123pan.com/s/I1oZVv-sS7GA 提取码:xmeK
ComfyUI 使用技巧:
- 使用 t5xxl-FP16 和 flux1-dev-fp8 模型进行 28 步的推理过程,显存用量为 27GB。当 cfg 设为 3.5 时,推理时间为 27 秒;若不设置 cfg,则为 15 秒。可以使用 Hyper-FLUX-lora 来加速推理过程
- 您可以尝试调整参数 control-strength、control-end-percent 和 cfg(适当降低)以获得更佳结果
- 以下示例采用的参数为:control-strength = 0.9、control-end-percent = 1.0、cfg = 3.5
模型细节
- 该模型基于分辨率为 768x768 的 12M laion2B 数据集和内部源图像进行训练。在该尺寸下进行推理能得到最佳效果,其他尺寸则效果稍逊。
- 推荐将 controlnet_conditioning_scale 设置在 0.9 至 0.95 之间。
- 请注意:目前发布的仅为训练过程中的 alpha 版本,我们将在准备就绪后推出更新版。
评论0