Qwen Image 2.1 Consistency LoRA

89 00

Qwen Image 2.1 Consistency LoRA 是专为解决 Qwen Image 2.1 编辑时“内容漂移”和“非目标区域重绘”问题而训练的轻量级LoRA。

作者
ausboss
基础模型
Qwen-Image-2.1
Qwen Image 2.1 Consistency LoRA

Qwen Image 2.1 原生图像编辑存在画面漂移问题:做风格转换、局部修改时,画面元素会发生位移,腰带、五官等对象位置偏移,还会擅自重绘发丝、招牌、纹理这类没有要求改动的区域。

Qwen Image 2.1 Consistency LoRA

Qwen Image 2.1 Consistency LoRA 是专为解决 Qwen Image 2.1 编辑时“内容漂移”和“非目标区域重绘”问题而训练的轻量级LoRA。加载后无需触发词,直接使用原编辑指令即可实现:相同提示词、相同种子下,编辑结果严格对齐原始构图。

Qwen Image 2.1 Consistency LoRA

核心问题解决

问题无 LoRA+ Consistency LoRA (1500)+ Consistency LoRA (2000)
重风格角落偏移(中位)24.3 px1.6 px0.9 px
重风格偏移 ≤3px 比例3%75%97%
局部编辑非目标区改变像素12.8%7.5%7.5%
与原始 PSNR27.7 dB31.6 dB31.7 dB
外观保真度(颜色距离)7.0*6.310.9

💡 *注:普通 Qwen 自身两次渲染差异为 7.0,1500 步 LoRA 的外观一致性等同于模型自身稳定性。
⚠️ VAE 编解码本身改变 ~2% 像素(37 dB),7.5% 已接近理论下限。

Qwen Image 2.1 Consistency LoRA

文件选择指南

检查点优势劣势推荐场景
1500 步保持 Qwen 原始色彩/质感;外观保真度高极端重风格仍有 ≤12.9px 偏移通用编辑、照片写实、需保留原色调
2000 步对齐精度最高(97% ≤3px)水彩/漫画风格偏苍白,饱和度降低线稿/矢量类重风格、需像素级对齐

ComfyUI 集成步骤

  1. 加载 LoRA:模型加载器后接 LoraLoaderModelOnly,强度 1.0(降低会 reintroduce 漂移)
  2. 编码设置:Text Encode Qwen Image 2.1 中 image_1=原图,resolution=0,提示词=编辑指令
  3. 采样参数:KSampler on encoder latent → 25 步 / CFG 1 / euler+simple / denoise 1
  4. 解码输出:VAE Decode → Split Image with Alpha(Qwen 2.1 VAE 输出 RGBA)

⚠️ 关键约束:latent 尺寸必须与原图一致!任何其他尺寸会触发 Qwen 内部缩放,LoRA 无法补偿。

适用场景

  • 产品图换色/换背景(需严格对齐)
  • 人像局部修改(换装/去配饰/改发型)
  • 艺术风格迁移(水彩/漫画/动漫)且要求构图不变
  • 批量编辑需种子可复现的工作流
  • ComfyUI 用户追求编辑确定性

⚠️ 注意事项:

  • 不增强弱编辑:若原版 Qwen 无法完成编辑,LoRA 也不会生效
  • 漫画/动漫轮廓微移:因重绘所有线条,极端情况仍有 ≤12.9px 偏移(1500 步)
  • 仅限英语指令:训练字幕全英文,其他语言效果未验证
  • 未测试场景:4/8 步 turbo LoRA、>2MP 分辨率、CFG>1
  • 2000 步风格漂移:纸面更白、颜料感减弱,写实场景慎用

相关图书

图层移除&图层拆分

图层移除&图层拆分

阿里DiffSynth-Studio推出配套Qwen-Image-2.1的一对LoRA模型,搭建起一套分层图像编辑管线,把普通平面图片拆解成可独立操作的图层资产,支持物体提取、移除、场景重建,两个LoRA可在DiffSynth-Studio工作流内热插拔切换。
Qwen Image 2.1 HDR VAE

Qwen Image 2.1 HDR VAE

Qwen Image 2.1 HDR VAE 是基于Qwen Image 2.1原生自编码器微调而来,面向RGBA、HDR图像重建场景开发。该模型的设计目标不是忠实还原原图像素,而是拉高画面动态范围、扩大色彩容积、增强细节表现力,属于视觉风格优先的VAE。
Qwen-Image2.1-ZenlessZoneZeroChibi-Lora

Qwen-Image2.1-ZenlessZoneZeroChibi-Lora

Zenless Zone Zero Chibi LoRA是专为 Qwen-Image-2.1 训练的Q版Chibi风格LoRA,适配ComfyUI,基于Comfy-Org提供的int8量化底模训练,文件仅76MiB,可快速把角色转为大头Q版画风。
Nunchaku-Qwen-Image-EDIT-2511/Nunchaku-Qwen-Image-2512

Nunchaku-Qwen-Image-EDIT-2511/Nunchaku-Qwen-Image-2512

官方 Nunchaku 推理引擎 本以高效量化著称,能显著降低显存占用,但近期对阿里新发布的 Qwen-Image-2512 和 Qwen-Image-EDIT-2511 尚未提供官方支持。 好消息是:社区开发者 QuantFunc 已率先完成量化适配,并发布了两个系列的 4-bit 模型,现已可在 ComfyUI 中直接使用。