图像修复模型BrushNet
腾讯PCG ARC实验室和香港中文大学的研究团队推出新型图像修复(inpainting)模型BrushNet,目前在ComfyUI上有两个开发者推出了插件,目前BrushNet仅推出了针对SD1.5模型的修复模型,从测试效果来看,对于人物图片的编辑及修复效果并不算好。对于BrushNet更多可查看:图像修复模型BrushNet:使用分解的双分支扩散方法来进行图像内容的恢复和编辑
ComfyUI-BrushNet
安装及使用
1、在ComfyUI Manager上直接搜索BrushNet进行安装,安装后重启ComfyUI后,将custom_nodes\ComfyUI-BrushNet\example文件夹下的BrushNet_example拖入ComfyUI即可加载开发者提供的工作流。
2、以下就是开发者给出的工作流,此插件主要提供的就是BrushNet模型加载和重绘节点,目前BrushNet模型需要手动下载,segmentation_mask_brushnet_ckpt
和 random_mask_brushnet_ckpt
都应放置在 models/inpaint/brushnet
文件夹内。语言分割节点所需的模型会自动下载。(点击下载模型)
3、按照下图图示进行使用,此插件提供的节点和功能都比较简单
ComfyUI BrushNet Wrapper
安装及使用
同样是使用ComfyUI Manager进行安装,此插件提供了多个节点,安装插件后重启ComfyUI,还需要下载BrushNet模型放入 ComfyUI/models/brushnet
文件夹下(模型下载地址)
开发者在custom_nodes\ComfyUI-BrushNet-Wrapper\examples文件夹下提供了4个工作流,工作流所所缺失的节点可通过ComfyUI Manager进行安装
brushnet_example_incremental_outpainting:背景替换,背景移除模型加载处可根据自己的需求选择不同的模型
brushnet_example_outpaint:扩图,从测试效果来看,目前扩图效果并不算好
brushnet_example_inpaint_ella和brushnet_example_workflow_blend这个两个工作流都出现了报错问题。
评论0