图像修复模型BrushNet

预计阅读时间1 分 387 views

腾讯PCG ARC实验室和香港中文大学的研究团队推出新型图像修复(inpainting)模型BrushNet,目前在ComfyUI上有两个开发者推出了插件,目前BrushNet仅推出了针对SD1.5模型的修复模型,从测试效果来看,对于人物图片的编辑及修复效果并不算好。对于BrushNet更多可查看:图像修复模型BrushNet:使用分解的双分支扩散方法来进行图像内容的恢复和编辑

ComfyUI-BrushNet

安装及使用

1、在ComfyUI Manager上直接搜索BrushNet进行安装,安装后重启ComfyUI后,将custom_nodes\ComfyUI-BrushNet\example文件夹下的BrushNet_example拖入ComfyUI即可加载开发者提供的工作流。

2、以下就是开发者给出的工作流,此插件主要提供的就是BrushNet模型加载和重绘节点,目前BrushNet模型需要手动下载,segmentation_mask_brushnet_ckpt 和 random_mask_brushnet_ckpt 都应放置在 models/inpaint/brushnet 文件夹内。语言分割节点所需的模型会自动下载。(点击下载模型

3、按照下图图示进行使用,此插件提供的节点和功能都比较简单

ComfyUI BrushNet Wrapper

安装及使用

同样是使用ComfyUI Manager进行安装,此插件提供了多个节点,安装插件后重启ComfyUI,还需要下载BrushNet模型放入 ComfyUI/models/brushnet文件夹下(模型下载地址

开发者在custom_nodes\ComfyUI-BrushNet-Wrapper\examples文件夹下提供了4个工作流,工作流所所缺失的节点可通过ComfyUI Manager进行安装

brushnet_example_incremental_outpainting:背景替换,背景移除模型加载处可根据自己的需求选择不同的模型

brushnet_example_outpaint:扩图,从测试效果来看,目前扩图效果并不算好

brushnet_example_inpaint_ella和brushnet_example_workflow_blend这个两个工作流都出现了报错问题。

评论0

分享此文档

图像修复模型BrushNet

或复制链接

文章目录
没有账号?注册  忘记密码?