AI绘画的救星！手把手教你在ComfyUI玩转局部重绘！_阿里

我们在用ai创作图片的时候，通过模型和提示词，让ai有了很大的随意发挥空间，这种随意发挥带来了很多随机性和不确定性，大部分情况下会给我们带来更多的惊喜。但是总会有一些时候，有一些小细节不尽人意

这个时候，我们就需要一个很普通，却很重要的功能——局部重绘

我们可能会经常遇到以下几个场景

图片的某个细节有缺陷
提示词污染导致部分细节不准确
整体都很好，但是想换个发色/衣服/裙子

这些时候，就需要用到局部重绘

什么是局部重绘

在使用ai绘画时，尽管可以通过调整模型和参数来获得好的作品，但准确性问题仍然存在。ai的扩散算法虽然带来了无限可能，但也可能导致一些意料之外的结果，如不自然的四肢或元素的错误放置。幸运的是，stable diffusion的局部重绘功能可以解决这些问题。

为了方便演示，我们用以下参数先批量生产一堆美女

在这里插入图片描述

局部重绘操作

局部重绘类似于修正，可以直接覆盖并重绘图像的特定区域。例如，如果我想改变角色的头发颜色，可以通过在正向提示词中加入特定提示词，并调整重绘幅度来实现。这个过程在stable diffusion中可以实现，甚至现在midjourney也开始支持局部重绘了，今天我们从comfyui的角度来讲如何实现局部重绘

我们就拿其中一张画出来的美女图为例，整体都非常好，但是她的眼睛，看起来好像颜色不对，我们就用局部重绘来修正眼睛的缺陷

在这里插入图片描述

通常来说，comfyui中的局部重绘可以细分为以下几个步骤

1.搭建工作流

通常我们搭建一个图生图的工作流时，我们会用“vae编码”节点来把图像进行像素空间到潜空间的转化，然后再链接传给ksampler采样器的latent。

当我们要使用遮罩时，则需要在“vae编码”节点和ksampler节点中间，再加一个“设置latent噪波遮罩”节点来传递遮罩信息
在这里插入图片描述

设置latent噪波遮罩

以上就是重绘的基础部分了，仅仅是在基础图生图的基础上加上遮罩即可。为了方便使用，我对工作流加了亿点点细节，加了controlnet，加了clipseg语义分割，以及面部修复，这里我们先跳过，后面我会细讲。

文末可以获取完整工作流文件
在这里插入图片描述

工作流

2.选择重绘区域

在webui中，可以用局部重绘功能，用画笔涂抹想要重绘的部分，而在comfyui中，其操作也类似，我们对图像加载节点右键就可以看到“在遮罩编辑器中打开”

在这里插入图片描述

遮罩编辑器

接下来，我们通过遮罩编辑器涂抹眼睛的部分，然后点击save to node，就可以保存你涂抹的区域

在这里插入图片描述

遮罩编辑器

3.修改重绘提示词

我们可以保留大部分的提示词，但是需要稍微修改一下，改成我们需要的提示词，比如我们想让她闭眼，则加上“closed eyes”，想要眼睛变成蓝色，则加上“blue eyes”

比如在上面的例子中，我分别尝试了用“closed eyes”，和“beautiful eyes”来分别尝试让人物闭眼，和直接修复眼睛，得到的结果如下图（左边是原图，中间是闭上眼睛，右边是修复眼睛）

在这里插入图片描述

眼睛修复

4.调整参数抽卡

对于局部重绘的图片，在模型选择上其实很简单，主要也就分为写实模型和动漫模式，依据你的原图选择模型即可。其他的如采样方法、采样步数、以及降噪参数等，就按照普通的图生图设置来就行。以下是我重绘的参数，仅作参考

前面只是修改了一下眼睛，效果不是很明显，我们换个例子，直接换衣服来看看具体效果。对于以下提示词，我只需要不断修改“white dress”为各种颜色的衣服，就可以看到不同的换装效果

best quality, masterpiece, (photorealistic:1.5),8k, raw photo,xxmixgirl,  
1girl, solo, long hair, breasts, looking at viewer, (white dress:1.2), simple background, black hair, cleavage, bare shoulders, brown eyes, jewelry, medium breasts, collarbone, cowboy shot, earrings, grey background, necklace, off shoulder, bag, lips, realistic,

在这里插入图片描述