在这个时代,我们习惯于拥有高清、色彩丰富的照片,然而,那些古老的黑白色老照片由于年代的久远,往往会出现模糊、破损等现象。
那么今天要给大家介绍的是,用 Stable Diffusion 来修复老照片。
前段时间 ControlNet 的除了上线了“IP-Adapter”模型以外还增加另一个叫“Recolor”的模型,它的作用就是给图片重新上色。通过“Recolor”,我们能够让那些古老的黑白色老照片重现生机,展现出它们原本应有的色彩和细节。
更多SD教程:
一、插件以及模型下载
本文必要用到的插件、底本以及模型如下:
1. 在使用“Recolor”之前,必要将自己的 ControlNet 更新到最新版本并且必要下载相关模型:
模型下载链接: https://huggingface.co/lllyasviel/sd_control_collection/tree/main
2. 缩小底本“StableSR“装置。(可下可不下)
“StableSR”可以在“扩展”-“可下载”-搜索关键词“StableSR”直接装置。
底本 Github 链接: https://github.com/pkuliyi2015/sd-webui-stablesr
使用“StableSR”底本必要下载三个模型:
①“StabilityAI”的官方大模型,使用“StableSR”底本必须要用的模型。(5.21GB)
(模型放入“sd-webui\models\Stable-diffusion”文件夹中)
模型链接: https://huggingface.co/stabilityai/stable-diffusion-2-1/tree/main
②必要用到的“VAE”模型。(745MB)
模型链接: https://drive.google.com/file/d/1ARtDMia3_CbwNsGxxGcZ5UP75W4PeIEI/view
③ “StableSR”底本模型。(400MB)
(模型放入:“sd-webui\extensions\sd-webui-stablesr\models”文件夹中)
模型链接: https://huggingface.co/Iceclear/StableSR/blob/main/webui_768v_139.ckpt
3. “Multidiffusion”插件装置。(可下可不下)
同样可通过“扩展”-“可下载”-搜索关键词“Tiled diffusion”直接装置。
二、照片修复
1. 首先打开“Stable Diffusion”,在“ControlNet Unit 0”上传一张黑白老照片,然后“启动”ControlNet 并且勾选“完美像素模式”。
2. 控制类型抉择“Recolor”,预处理器抉择“recolor_luminance”,然后模型会默认选上。
3. 点击“ControlNet Unit 1”再把刚刚那张黑白照片上传上去,然后“启动”ControlNet 并且勾选“完美像素模式”。
4. 控制类型抉择“Depth”,预处理器抉择“depth_zoe”,然后模型会自动选上。
5. 配置好 ControlNet 之后,抉择一个人物写实模型,然后在正向提醒词里面可以写一些关于照片里面的内容,比如黑色西装、黑色头发、白色帽子等等,然后反向提醒词放个通用的就可以,其实不写也行。
6. 配置生成参数,生成参数可以根据自己的需求配置,尺寸这里建议设为跟照片同样的比例。
7. 配置完以上参数之后,点击“生成”便可。
我们可以看到从原来的黑白照片,变成了彩色照片,但是我们发现照片还是会有一些模糊。不过没事,可以尝试以下方法:
三、细节优化
1. 点击“后期处理”上传刚刚生成的彩色照片。
2. 将“缩放比例”调为“1”,然后将“GFPGAN 可见程度”调为“1”。
3. 配置完以上参数之后,点击“生成”便可。
(如果觉得这样就 OK 了,那到这里就结束了,想让画面更清晰的,可以接着往下看)
我们可以看到脸部变清晰了,但是其他的地方还是会有一些模糊,不过没事,接下来我们可以使用“StablSR”底本和“Multidiffusion”插件来让整张照片都变得更高清。
(下面的部分必要装置“StablSR”底本和“Multidiffusion”插件和下载“StablSR”底本的模型)
1. 将刚刚的图片发送到“图生图”。
2. 抉择“v2-1_768-ema-pruned.ckpt”大模型和“vqgan_cfw_00011_vae_only.ckpt”VAE 模型。(正向提醒词和反向提醒词可以不用写)
3. 配置生成参数,跟文生图参数保持一致就行。
4. 启动“Tiled Diffusion”以及“Tiled VAE”,将“缩小倍数”改为“1”,然后勾选“启动噪声反转”,其他的参数保持默认便可。
5. 抉择“StableSR”底本,在“SR 模型”抉择“webui_768v_139.ckpt”模型,然后“缩小倍数”为“2”,勾选“纯噪声”。
6. 配置好以上参数之后,点击“生成”便可。
我们可以看到经过缩小之后,照片变得更清晰更高清了。