Style-Transfer

412 00

Style-Transfer 是一款基于 Qwen-Image-Edit-2511 架构的实验性 LoRA 微调模型,专为风格转换与艺术变换设计。它能够将参考图像(如卡通、线稿、插画)的视觉风格精准迁移到源图像(如真人照片)上,同时最大程度保留源图像的结构与构图。

作者
zooeyy
触发词
图1变为图2风格
基础模型
Qwen Image Edit
Style-Transfer

Style-Transfer 是一款基于 Qwen-Image-Edit-2511 架构的实验性 LoRA 微调模型,专为风格转换与艺术变换设计。它能够将参考图像(如卡通、线稿、插画)的视觉风格精准迁移到源图像(如真人照片)上,同时最大程度保留源图像的结构与构图。

Style-Transfer

目前该模型处于 v0.1 Alpha 阶段,已在 ComfyUI 中验证了其对多种艺术风格(如 Lacoste 鳄鱼素描、波普艺术、极简主义卡通等)的良好适配能力。

核心功能

  • 一键风格迁移:只需提供一张源图像和一张风格参考图,即可实现从写实到艺术风格的快速转换。
  • 结构保持:在应用新风格的同时,严格锁定源图像的人物姿态、物体位置及整体构图。
  • 多风格支持:适用于素描、波普艺术、扁平插画、极简卡通等多种视觉流派。

技术规格

  • 基础模型:Qwen-Image-Edit-2511
  • 训练数据:400+ 组高质量图像对
  • 训练步数:22,000 steps
  • 超参数:Rank 32, Learning Rate 1e-4
  • 训练分辨率:1024×1024
  • 硬件环境:NVIDIA RTX 4090 (约 15s/iter)

ComfyUI 使用指南

  1. 加载图像:
    • 使用 Load Image 节点加载你的源图像(Source Image,如真人照片)。
    • 使用另一个 Load Image 节点加载风格参考图像(Style Reference,如目标风格的画作)。
  2. 应用 LoRA:
    • 加载 Style-Transfer LoRA 模型。
    • 将 LoRA 强度(Strength)设置在 0.6 – 1.0 之间,以平衡风格强度与内容保真度。
  3. 生成结果:
    • 连接至 Image-to-Image (Img2Img) 或 Inpainting 节点。
    • 输入提示词描述源内容(可选),并触发生成。

当前局限性 (Alpha 阶段)

由于模型仍处于早期开发阶段,用户可能会遇到以下情况:

  • 面部模糊:在剧烈风格转换下,人物面部特征可能出现细节丢失或模糊。
  • 色彩偏差:不同风格间的色彩一致性可能不稳定,需后期微调。
  • 纹理损失:极其复杂的纹理(如精细织物、毛发)可能无法完全还原或转移。

未来路线图 (v0.2+)

团队计划在下个版本中重点优化以下方面:

  • 🛡️ 面部保护机制:引入遮罩(Masking)技术,确保转换过程中面部特征清晰可控。
  • 🎨 色彩校正损失函数:增强色彩一致性,使风格迁移更自然。
  • 📚 扩展风格库:支持更多样化、更极端的艺术参考风格。
  • 🖼️ 高分辨率训练:提升模型在 2K/4K 图像上的表现力与细节还原度。

相关图书

 Qwen-Image-EliGen

 Qwen-Image-EliGen

Qwen-Image-EliGen是基于 Qwen-Image 训练的精确分区控制模型,模型结构为 LoRA,可以通过输入每个实体的文本和区域条件(蒙版图)来控制每个实体的位置和形状。
PJ0 QwenImage Realistic FP8

PJ0 QwenImage Realistic FP8

PJ0 QwenImage Realistic FP8 是一次针对性明确的优化迭代,重点提升真实感与细节表现力。结合合理的参数设置,尤其在低 CFG 与优质采样器配合下,能够稳定输出接近专业摄影水准的图像结果,适合写实风格创作者纳入工作流程。
Draw2Photo

Draw2Photo

Draw2Photo LoRA 是一款基于 Qwen-Image-Edit-2511 模型的Lora,这款 LoRA 能够将一张简单的儿童素描与一张真实的人脸照片结合,生成一张既保留画作创意结构、又拥有逼真质感和人物身份的高清照片。
图层移除&图层拆分

图层移除&图层拆分

阿里DiffSynth-Studio推出配套Qwen-Image-2.1的一对LoRA模型,搭建起一套分层图像编辑管线,把普通平面图片拆解成可独立操作的图层资产,支持物体提取、移除、场景重建,两个LoRA可在DiffSynth-Studio工作流内热插拔切换。