一、如何用 AI 换装?
直接进入教程,我们将会用到 Stable Diffusion WebUI 中安装的 Inpaint Anything 扩张,如果你还没有 SD 本地环境,可以先查看其他配置本地 SD 环境(安装实在是太复杂了,对 Mac 用户也不友好)或者运用一些在线的 Stable Diffusion WebUI 工具。
第 1 步:上传图片到 Inpaint Anything 中
点击 Inpaint Anything 标签页下,将图片拖动到输出图象框中。
第 2 步:运行分隔模型
等待图片上传完成后,点击“运行 Segment Anything”按钮,然后等待,你就能看到这样的语义分隔图,不同的颜色代表了图片中识别出的不同对象。
第 3 步:创建蒙版
运用画笔在分隔图中标识出想要重绘的裙子地区,不需要整件衣服涂黑,每件衣服每个部分点一个点就可以了,鼠标放在图片上时按键盘 S 键可以放大图片,按 R 复原。
然后点击“创建蒙版”按钮。
如果发现蒙版未覆盖您想要的所有地区,请返回分隔图并绘制更多地区。
我发现裙子的肩带没有被选中,返回分隔图增了一个点。得到以下图:
“展开蒙版地区”这个是翻译的问题,英文为“Expand mask region”,意思是向外圈稍微扩张一下遮罩的大小。
“根据草图修剪蒙版”是指:从蒙版中减去绘制的新地区。
“根据草图添加蒙版”是指:将绘制的新地区添加到蒙版中。
这里就不展开详述了。现在蒙版已经很满意了。
第 4 步:将蒙版发送至重绘
可以在 Inpaint Anything 扩张中重绘,但更推荐将蒙版发送到图生图页面进行重绘。
点击“仅蒙版”这个标签页,然后点击获取蒙版,就会获得以下一张黑白的蒙版页面,如果你有 Photoshop 运用经验的话,这个蒙版和 PS 中的蒙版是一样的。
点击“发送到图生图”按钮
返回到图生图的标签页下,我们就能看到以下的图片和蒙版出现在“上传重绘模版”的标签下。
点击“自动检测尺寸”的按钮,将重绘的图片尺寸自动改为输出蒙版的尺寸:
然后选择你喜欢的大模型,最好是真实系的大模型,我这里以<基础模型_ XL_v1.0 refiner 1.0>为例。
在提示词中输出:
Woman in pink floral dress.
蒙版内容处理选择:潜空间噪声或者空白潜空间,其他项保持默认即可。
生成数量可以改为一次生成 4 张。
看一下重绘后的效果,呃,虽然是换装了但是也没有全换,别着急,我们可以运用下面的技巧进一步提升图片的质量。
进一步绘制照片
方法一:调整重绘照片的尺寸
如果你清楚潜空间扩散原理的话,就会知道我们图象都是缩小到 512x512px 的更小图去进行加噪和去噪的,如果我们的原图比例很特殊就可能导致画面会出现一些畸变,没关系,我们也不用了解具体的原理,只要尽量让宽或高是 512、768、1024 这样的尺寸就好。
重复上面的操作,再来看我们重绘后的照片。
方法二:替换大模型
如果图片重绘效果不理想,可以替换掉大模型,运用真实视觉修复模型。
我们将基础大模型换成了其他的真实系模型。比如:麦橘、DreamShaper 等。
方法三:自定义服装的图案
运用 ControlNet IP-Adapter 换上你喜欢的图案。
我需要用到两个控制网络,
第一个运用 Canny
启用:√
预处理器:Canny 硬边缘
模型:control_v11p_sd15_canny [d14c016b]
控制权重:0.6
第二个运用 IP-adapter
启用:√
预处理器:ip-adapter
模型:ip-adapter_sd15_plus [32cd8f7f]
控制权重:0.9
然后点击生成按钮。
还可以将您想要的衣服的精确图象放入 IP adapter 的图象控制窗中,如图