为了提升图像放大的质量和细节保留,Reddit网友开发了一种新的工作流程,结合了 SD 3.5 Large 和 Medium 模型与跳层指导(Skip Layer Guidance, SLG)。这一工作流不仅能够放大图像,还能在生成图像中保留更多的细节,提供更好的视觉效果。
主要特点
1、 结合 SD 3.5 Large 和 Medium 模型
-
SD 3.5 Large 模型:生成分辨率为1024x1024的图像。 -
SD 3.5 Medium 模型:训练到1440x1440分辨率,可以作为SD 3.5 Large生成图像的1.4倍放大器使用。
2、 跳层指导(SLG)
-
功能:在生成过程中跨模型的特定层缩放注意力,帮助引导模型关注细节。 -
灵活性:模型中的任何层都可以放大或缩小,这可能会产生有趣的结果。
3、 自定义电影风格Lora
-
训练数据:基于 Ferrari Solaris 胶片库存的250张图像,在A40 GPU上进行了10,000步的训练。 -
目的:改进颜色处理和光照,提供独特的电影风格效果。
4、 颜色处理和光照改进
-
效果:与之前的模型相比,改进了颜色处理和光照,使生成的图像更加自然和逼真。
5、 适用系统
-
兼容性:需要最新版本的ComfyUI以实现SD 3.5 LyCORIS兼容性。
工作流程详解
-
生成初始图像:使用 SD 3.5 Large 模型 生成分辨率为1024x1024的初始图像。 -
应用电影风格Lora:使用训练好的 自定义电影风格Lora 模型,进一步增强图像的颜色处理和光照效果,提供独特的电影风格。 -
应用跳层指导(SLG):在生成过程中,使用跳层指导(SLG)技术跨模型的特定层缩放注意力,帮助模型更好地关注细节。 -
放大图像:使用 SD 3.5 Medium 模型 对初始图像进行1.4倍放大,生成分辨率为1440x1440的图像。
注意事项
-
Lora 替换:工作流中的 Lora 模型可以进行替换,但需要确保使用最新版本的 ComfyUI 来加载 SD 3.5 Lora 模型。
评论0