Pruna-Qwen-Image-2.1

123 00

Pruna 发布 Pruna-Qwen-Image-2.1,一套面向 Qwen-Image-2.1 的加速LoRA,基于 DMD 蒸馏方案训练,可把原生模型采样步数压缩至5步或8步,最高推理提速6.3倍,支持文生图与图像编辑。

作者
Pruna
基础模型
Qwen-Image-2.1
 Pruna-Qwen-Image-2.1

Pruna 发布 Pruna-Qwen-Image-2.1,一套面向 Qwen-Image-2.1 的加速LoRA,基于 DMD 蒸馏方案训练,可把原生模型采样步数压缩至5步或8步,最高推理提速6.3倍,支持文生图与图像编辑。适配器挂载在原版基础模型之上,文本编码器、VAE、原有推理管线无需改动。当前为 v0.1 初版,仍在迭代优化。

 Pruna-Qwen-Image-2.1

两个LoRA变体

权重文件采样步数取舍说明
p_qwen_image_2.1_8step_v0.1.safetensors8画质更好,推荐默认使用
p_qwen_image_2.1_5step_v0.1.safetensors5速度最快,图像质量会明显下降

两个适配器各自配套专属sigma调度方案,同一时间只能加载其中一个。

训练与适用范围

  • 训练分辨率:1024×1024(1K),混合文生图任务、单图/多图编辑,最多支持3张参考图
  • 提示词:可选用提示词上采样,直接使用详尽提示词通常效果更佳
  • 外推边界:2K等高分辨率、超过3张参考图可以跑,但不在训练覆盖范围内,画质不稳定
  • 特性:无CFG,支持图像编辑

版本说明:v0.1 是首次预览发布,图像质量暂时还追不上原版Qwen-Image-2.1基础模型,团队持续优化蒸馏方案,后续会更新仓库。

基准测试信息

测试环境:H100 80GB,BF16,batch size=1,使用官方模型卡示例提示词;统计包含提示词编码、去噪、VAE解码,不包含模型加载、预热、图片存储,取预热后3轮推理的中位数。

  • 原版基线:40步,开启KV缓存
  • Pruna LoRA:5/8步,基准测试时关闭KV缓存;示例代码已支持开启KV缓存,图表尚未重新复测
  • 测试约束:LoRA不合并,不启用模型编译、CPU卸载;速度对比不代表图像质量一致

简要原理

基于DMD蒸馏方式训练LoRA,专门学习少步采样下的图像分布,减少去噪迭代次数,实现大幅加速,保留原生模型整套组件,不用替换基础权重。

适用场景:需要大批量快速生成图像、实时图像预览、本地端快速出图,适合愿意小幅牺牲画质换取巨大推理速度提升的场景。

相关图书

Clothes Try On (Clothing Transfer)

Clothes Try On (Clothing Transfer)

Clothes Try On (Clothing Transfer) 是目前基于 Qwen-Image-Edit 实现虚拟试衣的实用化尝试之一。虽然在复杂图案和配件处理上仍有提升空间,但其在人体贴合度和体型泛化能力方面的表现令人印象深刻。
Qwen Image 2.1 Outpaint LoRA

Qwen Image 2.1 Outpaint LoRA

Qwen Image 2.1 Outpaint LoRA 是专为通义Qwen Image 2.1打造的外绘(Outpaint)LoRA,核心解决原生Qwen Image 2.1扩图时原图容易移位、重新构图的痛点。
PixelSmile

PixelSmile

PixelSmile是一款专门针对细粒度面部表情编辑而训练的模型。你可以通过平滑的强度滑块控制 12 种表情,混合多种情绪,并且它同时适用于真实照片和动漫图像。
Qwen-Edit-2511_LightingRemap_Alpha0.2

Qwen-Edit-2511_LightingRemap_Alpha0.2

基于 Qwen-Edit-2511 模型训练的 Alpha 版本 LORA,专为实现 “色块引导式图像重打光” 而设计。该 LORA 能够根据图像中特定颜色的色块位置与颜色,智能地对人物或场景进行光影重构与氛围渲染,同时自动移除色块本身,生成自然、高质感的光照效果。