第十二：Stable diffusion扩展IC-Light插件的安装与教程
https://i-blog.csdnimg.cn/direct/a41a6aa361404170a3fa6896a80b2c02.png1.在线体验地址：https://huggingface.co/spaces/lllyasviel/IC-Light
一.安装（亲测可用）
1.首先将stable-diffusion-webui 已经升级到 1.10.0版本
2.再装下面两个插件：建议直接下载解压复制到extensions
2.1.本人头次是在扩展里安装的，但安装成功但不显示，就在这卡了好久
3.sd-webui-model-patcher地址
https://link.zhihu.com/?target=https%3A//github.com/huchenlei/sd-webui-model-patcher
4.SD Forge IC-Light地址
https://github.com/huchenlei/sd-forge-ic-light
https://i-blog.csdnimg.cn/direct/35c5e76edb4b4000859c7360e58601c3.png
二.下载模子
1.IC-Light模型下载：http://huggingface.co/huchenlei/IC-Light-ldm/tree/main
2.模型1：IC-Light.SD15.FBC.safetensors
3.模型2：IC-Light.SD15.FC.safetensors
4.放入：.../stable-diffusion-webui/models/ic-light
4.1.Models里要是没有ic-light文件夹就自己新建一个
5.模型3：u2net_human_seg.onnx (第一次运行时会自动下载，速度会慢一点）
5.1.放入：autodl-tmp/stable-diffusion-webui/models/u2net
5.2.中间有过一段时间没用这个插件，后来更新后又去测试
发现一直在下载这个模型，但是位置却变成：\sd-webui-aki-v4.8\.cache\u2net，
把上面位置的复制了一个过来，结果又好了
https://www.codewithgpu.com/m/webui-ic-light
https://i-blog.csdnimg.cn/direct/81ce2c27d90e486f904506db13351762.png
三.利用教程（SD）
1.stable diffusion中IC-Light 目前版本还是简洁版，没啥太多的参数
1.1.想好好体验一下的话建议还是下个本地部署版本
https://i-blog.csdnimg.cn/direct/58d4a84a54dd4126834aee74a0bec575.png
2.Background Removal：背景移除
2.1.如果已有已删除背景的主体，则禁用
2.2.如果选择的主体对象不是人物，最好也不使用，非人物的识辨能力不高
https://i-blog.csdnimg.cn/direct/24ca2d1fcde34335aac47b0b5875282e.png
3.Restore Details▼ ：细节保留
Use the instead of the
4.Blur Radius：（模糊半径）值越大，IC-light对主体内部的光线参与度就会越少
4.1.值最大9时，光线不对主体内部产生影响，就跟PS直接P上去是一样
5.IC-Light通过机器学习技术，对图像的照明条件进行操纵，从而实现一致的光照效果
5.1.它提供两种类型的模型：文本条件照明模型和背景条件模型，两者均以前景图像作为输入
5.2.该技术的重要性在于它能够在不依赖复杂提示的情况下，通过简单的文本描述或背景条件
5.3.实现对图像照明的精确控制，这对于图像编辑、增强现实、虚拟现实等领域具有重要意义
四.文本条件模子
1.给定一个前景图像，通过文生图 txt2img 生成一个新的背景
1.1.然后将它们混合在一起，同时保持照明条件一致
2.用户可以输入文本提示词（如“左侧光线”、“日光”）
2.1.模型通过这些提示词和初始潜变量生成具有特定光照方向和特征的图像
2.2.例如用户输入提示词“阳光从窗口射入、温馨氛围、卧室”，并选择光照方向“左侧”
2.3.模型将生成具有左侧光照效果的图像，模拟阳光从左侧窗户射入的温暖氛围
https://i-blog.csdnimg.cn/direct/09ad9f540d984f0ab2cc4f5300cdc565.png
https://i-blog.csdnimg.cn/direct/36799c05c0b04ff79edbb530dcd6a883.png
五.配景条件模子
1.前景和背景条件下的重新照明 从前景图像中提取主体
1.1.然后将其放置在背景图像上，同时保持照明条件一致
1.2.采样方法 采样器 与 和 迭代步数 步骤 很重要；而提示词无关紧要
2.通过结合背景提示信息，可以对前景物体进行不同风格的光照变化，而无需复杂的提示词。
2.1.只需提供简单的描述，如“电影般的灯光”，即可轻松生成图像
2.2.模型根据提示和背景生成适当光照的前景图像，使人物与背景的光照匹配，呈现电影风格
https://i-blog.csdnimg.cn/direct/baec9602257a40679f92b39db49d3bd8.png
https://i-blog.csdnimg.cn/direct/c2e5be438b1642308714917bc7b56e7b.png
六.常见问题
1.缺点1.IC-Light SD版的大问题是它经常会过度改变对象的基色（比如衣服）
1.1.改提示词加权重也不行。所以要想用好还是需要PS后期一下
2.当然，还有另一个方法，那就是使用第二种背景条件模型，自己放入指定的背景
3.缺点2.IC-light是整个画面重采样的，所以人物样貌会有些改变
3.1.建议使用lora或者PS后期一下
https://i-blog.csdnimg.cn/direct/44112e90ecc24b048c37129761609fed.png
七.常用参数
sunshine from window - 窗外的阳光
neon light - 霓虹灯光
city - 城市
sunset over sea - 海上日落
golden time - 黄金时间
sci-fi RGB glowing - 科幻风格的RGB光效
cyberpunk - 赛博朋克
natural lighting - 自然光线
warm atmosphere - 温暖的氛围
at home - 在家
bedroom - 卧室
magic lit - 魔幻照明
evil - 邪恶
gothic - 哥特风格
Yharnam - 雅南（《血源诅咒》中的城市）
light and shadow - 光与影
shadow from window - 窗外的阴影
soft studio lighting - 柔和的摄影棚灯光
home atmosphere - 家庭氛围
cozy bedroom illumination - 舒适的卧室照明
八.本地部署
1.链接：https://pan.baidu.com/share/init?surl=KpVQj6EOQHs8FlhI8qtrZw
提取码：60k5
九.利用步调
1.上传图片：首先，上传一张你想要编辑的图片
2.选择光源位置：根据需要的光照效果，选择光源方向
3.输入提示词：对于需要特定氛围的场景，通过输入描述性的提示词来设定光照风格
4.选择背景（如果需要）：可以选择一个背景图片，让IC-Light将前景与背景进行风格化融合
5.调整参数：细化光源的大小、模糊度或颜色等参数，以达到最佳效果
6.生成新图片：完成设置后，点击生成，IC-Light将自动处理并生成包含新光照效果的图片
十.ComfyUI本地运行
1.前提：电脑安装comfyui，并且该插件依赖ComfyUI-layerdiffuse插件
2.插件可根据上方提供的两款自由安装，也可以都安装
3.这里使用的是ComfyUI-IC-Light-Native
3.1.这款比较简洁化，简单明了，也方便大家更好的理解
4.ComfyUI-IC-Light这款节点功能更加全面，光照形状、范围、位置，大小等都可以做
5.安装ComfyUI-IC-Light-Native可以直接通过ComfyUI管理器进行安装（建议安装方式）
6.另一种就是下载源代码解压为一个文件夹，放入comfyui custom_nodes目录下
https://i-blog.csdnimg.cn/direct/533dada5b34343aaac12f029f61596c8.png
7.通过git url进行安装，如果可以在安装节点中搜索到想要安装的节点插件名，可以直接点击安装
https://i-blog.csdnimg.cn/direct/37d9585932784676af7b256fb0021ed8.png
8.在正式使用之前，需要将模型下载好，并放入models-unet目录下
https://i-blog.csdnimg.cn/direct/89145534ff6e4d57a4177b4354741a06.png
9.然后试试最简单的打光方式，上传一张人像图，填写提示词，进行打光
https://i-blog.csdnimg.cn/direct/c11051711ba3400ab8e888a2b459296f.png
10.当然也可以给定前景图和光源贴图，进行打光
https://i-blog.csdnimg.cn/direct/bf85f5fc0afa44d5b55ff843ca495984.png
11.最后一种方式，就是上传背景图和前景人物，将背景与人物融合
https://i-blog.csdnimg.cn/direct/a8b71ed24c924bccb3e98f2af8869b9f.png
免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。
页:
[1]