保姆级教程！Stable Diffusion中如何实现模特换装？

推荐阅读

一、如何用 AI 换装？

直接进入教程，我们将会用到 Stable Diffusion WebUI 中安装的 Inpaint Anything 扩展，如果你还没有 SD 本地环境，可以先查看其他配置本地 SD 环境（安装实在是太复杂了，对 Mac 用户也不友好）或者使用一些在线的 Stable Diffusion WebUI 工具。

第 1 步：上传图片到 Inpaint Anything 中

点击 Inpaint Anything 标签页下，将图片拖动到输入图像框中。

第 2 步：运行分割模型

等待图片上传完成后，点击“运行 Segment Anything”按钮，然后等待，你就能看到这样的语义分割图，不同的颜色代表了图片中识别出的不同对象。

第 3 步：创建蒙版

使用画笔在分割图中标识出想要重绘的裙子区域，不需要整件衣服涂黑，每件衣服每个部分点一个点就可以了，鼠标放在图片上时按键盘 S 键可以放大图片，按 R 复原。

然后点击“创建蒙版”按钮。

如果发现蒙版未覆盖您想要的所有区域，请返回分割图并绘制更多区域。

我发现裙子的肩带没有被选中，返回分割图增了一个点。得到如下图：

“展开蒙版区域”这个是翻译的问题，英文为“Expand mask region”，意思是向外圈稍微扩展一下遮罩的大小。

“根据草图修剪蒙版”是指：从蒙版中减去绘制的新区域。

“根据草图添加蒙版”是指：将绘制的新区域添加到蒙版中。

这里就不展开详述了。现在蒙版已经很满意了。

第 4 步：将蒙版发送至重绘

可以在 Inpaint Anything 扩展中重绘，但更推荐将蒙版发送到图生图页面进行重绘。

点击“仅蒙版”这个标签页，然后点击获取蒙版，就会获得如下一张黑白的蒙版页面，如果你有 Photoshop 使用经验的话，这个蒙版和 PS 中的蒙版是一样的。

点击“发送到图生图”按钮

返回到图生图的标签页下，我们就能看到如下的图片和蒙版出现在“上传重绘模版”的标签下。

点击“自动检测尺寸”的按钮，将重绘的图片尺寸自动改为输入蒙版的尺寸：

然后选择你喜欢的大模型，最好是真实系的大模型，我这里以<基础模型_ XL_v1.0 refiner 1.0>为例。

在提示词中输入：

Woman in pink floral dress.

蒙版内容处理选择：潜空间噪声或者空白潜空间，其他项保持默认即可。

生成数量可以改为一次生成 4 张。

看一下重绘后的效果，呃，虽然是换装了但是也没有全换，别着急，我们可以使用下面的技巧进一步提升图片的质量。

进一步绘制照片

方法一：调整重绘照片的尺寸

如果你清楚潜空间扩散原理的话，就会知道我们图像都是缩小到 512x512px 的更小图去进行加噪和去噪的，如果我们的原图比例很特殊就可能导致画面会出现一些畸变，没关系，我们也不用了解具体的原理，只要尽量让宽或高是 512、768、1024 这样的尺寸就好。

重复上面的操作，再来看我们重绘后的照片。

方法二：替换大模型

如果图片重绘效果不理想，可以替换掉大模型，使用真实视觉修复模型。

我们将基础大模型换成了其他的真实系模型。比如：麦橘、DreamShaper 等。

方法三：自定义服装的图案

使用 ControlNet IP-Adapter 换上你喜欢的图案。

我需要用到两个控制网络，

第一个使用 Canny

启用：√

预处理器：Canny 硬边缘

模型：control_v11p_sd15_canny [d14c016b]

控制权重：0.6

第二个使用 IP-adapter

启用：√

预处理器：ip-adapter

模型：ip-adapter_sd15_plus [32cd8f7f]

控制权重：0.9

然后点击生成按钮。

还可以将您想要的衣服的精确图像放入 IP adapter 的图像控制窗中，如图

赶快试试吧，关注我会持续分享更多 MJ，SD，leonardo 的生图技巧。