一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

大家好,这里是和你们一起探索 AI 的花生~ Controlnet、SD WebUI Forge 和 LayerDiffusion 的作者 lllyasviel 大神最近又推出了一个新的项目 IC-Light,可以实现节制一张图像的光照方位和色彩氛围,今天一起我们了解一下它的特点及用法~ 相关推荐:一、IC-Light 简介 IC-Light 项目主页: IC-Light 是 "Imposing Consistent Light (营造一致的光线)" 的缩写,它是一个照明节制项目,目前支持通过文本和后台图对远景内

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

大家好,这里是和你们一起探索 AI 的花生~

Controlnet、SD WebUI Forge 和 LayerDiffusion 的作者 lllyasviel 大神最近又推出了一个新的项目 IC-Light,可以实现节制一张图像的光照方位和色彩氛围,今天一起我们了解一下它的特点及用法~

相关推荐:

一、IC-Light 简介

IC-Light 项目主页: https://github.com/lllyasviel/IC-Light

IC-Light 是 “Imposing Consistent Light (营造一致的光线)” 的缩写,它是一个照明节制项目,目前支持通过文本和后台图对远景内容进行照明节制,使远景主体与后台环境光照一致,从而让二者融为一体。

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

从官方放出的截图中可以看出,IC-Light 可以对色彩氛围和光照方位进行节制。如提示词写了 “窗外的阳光”,那么处理后的图像中人物身上就会有明显的光影,整体色彩也会变成温暖的橘色;如果提示词写的霓虹灯光,则画面会变成暗调的红蓝光。光照方位则可以通过 Lighting Preference 选项来节制,支持左侧光、右侧光、底部光和顶部光。即使原图中的光影非常复杂,IC-Light 也可以重新进行打光。

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

二、应用方法

1. 在线体验

网址直达: https://huggingface.co/spaces/lllyasviel/IC-Light

Huggingface 已经有了 IC-Light 的在线应用 Demo,可以直接体验其光照节制功能。应用方式也非常简单,上传一张人物图像,用文本描述新的后台内容和色彩氛围,然后在 Lighting Preference 中设置光照的方位,最后点击 Relight 生成就可以了。

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

2. ComfyUI

IC-Light 原生插件: https://github.com/huagetai/ComfyUI-Gaffer

模型下载: https://huggingface.co/lllyasviel/ic-light/tree/main

ComfyUI 目前已经有多个实现 IC-Light 的插件,此处我应用的是原生的插件 ComfyUI-Gaffer,我们可以通过 git clone 或者 comfyui manager 装置。

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

插件装置成功后,需要下载 3 种 IC-Light 模型 (文末有资源包),装置到 ComfyUI/models/iclight 文件夹中,三种模型目前只适用于 SD 1.5 模型,作用分别为:

iclight_sd15_fc.safetensors:默认的重照模式,以文本和远景为条件。您可以应用初始潜影来影响重照效果。在 FG 工作流程中应用它
iclight_sd15_fcon.safetensors: 与 “iclight_sd15_fc.safetensors ”相同,但应用偏移噪声进行训练。在 FG 工作流程中应用它
iclight_sd15_fbc.safetensors: 以文本、远景和后台为条件的重新照明模型。在 BG 工作流程中应用它

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

以上步骤完成后,重启 ComfyUI,然后从 ComfyUI Gaffer 插件根目录的 example 文件夹中导入官方给的 6 个工作流文件,然后就可以正常应用了。其中 IC-Light 节点的相关参数和用法在 ComfyUI Gaffer 的 Github 主页中有详细介绍,应用前可以先仔细阅读一下。6 个工作流的作用分别是:

① workflow-gaffer-iclight-fc-text:文本生成后台,修改给定远景的光照,使其融为一体。

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

② workflow-gaffer-iclight-fc:文本生成后台+手动设置 8 种光照方位,修改给定远景的光照,使其融为一体。

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

③ workflow-gaffer-iclight-fbc:上传给定后台,修改给定远景的光照,使其融为一体。

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

④ workflow-gaffer-iclight-fc-normal:批量生成不同的光照环境。

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

⑤ workflow-gaffer-iclight-fc-animated:生成动态照明动画

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

⑥ workflow-gaffer-iclight-all:上传后台+设定光照方位+批量生成功能合集

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

3. SD WebUI Forge

插件链接: https://github.com/huchenlei/sd-forge-ic-light

模型下载: https://huggingface.co/huchenlei/IC-Light-ldm/tree/main

除了 ComfyUI,lllyasviel 自研的 SD WebUI Forge 也已经有了 IC-Light 的插件,可以在 「extension」中通过网址装置。然后下载 clight_sd15_fc_unet_ldm(用于远景)和 iclight_sd15_fbc_unet_ldm(用于后台)两个模型,装置到根目录的 stable-diffusion-webui-forge/models/unet(没有 unet 文件夹手动创建一个)。

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

SD WebUI Forge 中也支持从文本生成后台、节制照明方位和上传后台图对给定远景造成影响。需要注意的是:

如果是自己上传后台图,需要将照明模型又 FC 转为 FBC;
CFG 数值要调低,一般为2;
节制光照方位时,插件为自动在图生图版块生成灰度图,此处的 CFG 同样要调整为2,重绘幅度要调高为1。

一文详解打光神器 IC-Light!可节制光照方位和色彩氛围,免费应用

以上就是本期对打光节制插件 IC-Light 的相关介绍,喜欢的话记得点赞、收藏、评论三连支持一波,我会更有动力为大家推荐更多 AI 干货内容。相关模型、工作流文件都在下方的云盘链接内,记得下载~

另外我最新制作的课程《零基础 AI 绘画入门》已经上线,课程包含对 Midjourney 及 Stable Diffusion WebUI 的系统入门教学,并提供配套资源、各类实用工具和提示词库,能帮助初学者快速掌握这 2 款目前最热门的 AI 工具,感兴趣的小伙伴可以戳的链接了解详情:夏花生的《零基础 AI 绘画录播课》

给TA打赏
共{{data.count}}人
人已打赏
应用

从人机交互角度,聊聊最近爆火的ChatGPT-4o

2024-5-17 0:38:19

应用

航空航天的未来在AI?美国NASA录用首位首席人工智能官

2024-5-17 17:35:00

0 条回复 A文章作者 M管理员
    暂无讨论,说说你的看法吧
个人中心
今日签到
搜索