ToB企服应用市场:ToB评测及商务社交产业平台

标题: AI绘画的救星！手把手教你在ComfyUI玩转局部重绘！ [打印本页]
作者: 立聪堂德州十三局店    时间: 2024-8-28 07:16
标题: AI绘画的救星！手把手教你在ComfyUI玩转局部重绘！
我们在用AI创作图片的时间，通过模型和提示词，让AI有了很大的随意发挥空间，这种随意发挥带来了许多随机性和不确定性，大部分情况下会给我们带来更多的惊喜。但是总会有一些时间，有一些小细节不尽人意
这个时间，我们就需要一个很平凡，却很重要的功能——局部重绘
我们大概会经常遇到以下几个场景
这些时间，就需要用到局部重绘
什么是局部重绘

在使用AI绘画时，尽管可以通过调解模型和参数来获得好的作品，但正确性问题仍旧存在。AI的扩散算法虽然带来了无穷大概，但也大概导致一些意料之外的效果，如不天然的四肢或元素的错误放置。幸运的是，Stable Diffusion的局部重绘功能可以解决这些问题。
为了方便演示，我们用以下参数先批量生产一堆美女
     

局部重绘操作

局部重绘类似于修正，可以直接覆盖并重画图像的特定地区。比方，假如我想改变角色的头发颜色，可以通过在正向提示词中加入特定提示词，并调解重绘幅度来实现。这个过程在Stable Diffusion中可以实现，甚至如今Midjourney也开始支持局部重绘了，本日我们从ComfyUI的角度来讲怎样实现局部重绘
我们就拿此中一张画出来的美女图为例，团体都非常好，但是她的眼睛，看起来似乎颜色不对，我们就用局部重绘来修正眼睛的缺陷

通常来说，ComfyUI中的局部重绘可以细分为以下几个步骤
1.搭建工作流
   局部重绘团体的工作流实在就是一个图生图的工作流，只不过我们需要对图像加载的部分添加遮罩。
  通常我们搭建一个图生图的工作流时，我们会用“VAE编码”节点来把图像举行像素空间到潜空间的转化，然后再链接传给KSampler采样器的Latent。
当我们要使用遮罩时，则需要在“VAE编码”节点和KSampler节点中心，再加一个“设置Latent噪波遮罩”节点来传递遮罩信息

设置Latent噪波遮罩
以上就是重绘的底子部分了，仅仅是在底子图生图的底子上加上遮罩即可。为了方便使用，我对工作流加了亿点点细节，加了ControlNet，加了ClipSeg语义分割，以及面部修复，这里我们先跳过，后面我会细讲。
文末可以获取完备工作流文件

工作流
2.选择重绘地区
在WebUI中，可以用局部重绘功能，用画笔涂抹想要重绘的部分，而在ComfyUI中，其操作也类似，我们对图像加载节点右键就可以看到“在遮罩编辑器中打开”

遮罩编辑器
接下来，我们通过遮罩编辑器涂抹眼睛的部分，然后点击save to node，就可以保存你涂抹的地区

遮罩编辑器
3.修改重绘提示词
我们可以保留大部分的提示词，但是需要稍微修改一下，改成我们需要的提示词，比如我们想让她闭眼，则加上“closed eyes”，想要眼睛变成蓝色，则加上“blue eyes”
比如在上面的例子中，我分别实验了用“closed eyes”，和“beautiful eyes”来分别实验让人物闭眼，和直接修复眼睛，得到的效果如下图（左边是原图，中心是闭上眼睛，右边是修复眼睛）

眼睛修复
   我个人认为直接闭眼的感觉更好
  4.调解参数抽卡
对于局部重绘的图片，在模型选择上实在很简单，主要也就分为写实模型和动漫模式，依据你的原图选择模型即可。其他的如采样方法、采样步数、以及降噪参数等，就按照平凡的图生图设置来就行。以下是我重绘的参数，仅作参考
     前面只是修改了一下眼睛，效果不是很明显，我们换个例子，直接易服服来看看详细效果。对于以下提示词，我只需要不断修改“white dress”为各种颜色的衣服，就可以看到不同的换装效果
  1. Best quality, masterpiece, (photorealistic:1.5),8k, raw photo,xxmixgirl,  
  2. 1girl, solo, long hair, breasts, looking at viewer, (white dress:1.2), simple background, black hair, cleavage, bare shoulders, brown eyes, jewelry, medium breasts, collarbone, cowboy shot, earrings, grey background, necklace, off shoulder, bag, lips, realistic,
复制代码

换装
进阶应用本领

1.SAM检测获取蒙版
局部重绘除了使用画笔来绘制遮罩层以外，另有许多高级本领来得到遮罩蒙版，比如ComfyUI中通过SAM检测来自动获取蒙版，而不需要我们手动绘制，它的效果很类似于WebUI中的inpaint anything插件。
SAM检测的使用方式很简单，在加载图像节点右键就可以打开

SAM检测
然后我们只需要对想要选择的部分点几下即可，然后点击detect，就能本身检测选取，假如范围太大，就拉动下面的滑块来缩小选取范围（比如以下就是我选择上衣部分）

SAM检测
   许多时间，SAM自动检测会有一些选不到或多选的地方，这时间，我们还可以关掉SAM之后，在遮罩编辑器中继承涂抹，组合使用，精准选取
  2.提示词自动检测
许多时间，有人在使用ComfyUI时会追责备自动，假如你连遮罩选取这一步都不想手动操作怎么办？当然也可以了！
使用“CLIP语义分割”节点就可以实现这样的功能，我们添加“CLIP语义分割”节点，它就能根据你输入的提示词自动创建遮罩，我们通过简单的节点链接就可以把遮罩传递到下一步
如下图，我分别用“skirt”、“hair”和“face”提示词，就能自动检测到“裙子”、“头发”和“脸部”

提示词自动检测
   遮罩都能做到自动创建了，那其他节点的自动化就更轻易了！
  3.结合ControlNet
前面讲工作流的时间可以看到我在里面加了ControlNet应用堆，用于添加多个ControlNet，你大概会有疑问，局部重绘，要ControlNet干什么呢？
原因很简单，假如你只是重绘眼睛，让人物睁眼闭眼，ControlNet简直没有什么作用。但假如你是换装操作，假如不做一些人物姿态大概线条的固定，人物很轻易跑偏，造成重绘部分与团体不调和的情况。以是我加入了lineart和openpose来举行肯定的团体结构的控制
   同理的另有工作流中的脸部修复，假如仅仅是想修复人物面部，完全可以用脸部修复节点直接修复即可
  在ComfyUI中可以恣意组合各个节点，充实发挥节点工作流的上风！
  

ControlNet
结尾

   以上就是在ComfyUI中举行局部重绘的方法了，相比于WebUI，它更加的机动，我们可以把任何节点串起来，自由组合，只要足够有创意，就能做出各种各样的工作流。
  局部重绘技术为AI艺术创作带来了新的大概，有了局部重绘，对许多应用场景都有现实意义：
感爱好的小同伴，赠送全套AIGC学习资料，包罗AI绘画、AI人工智能等前沿科技教程和软件工具，详细看这里。

资料软件免费放送
越日同一发放请耐烦等待
关于AI绘画技术储备

学好 AI绘画 不论是就业照旧做副业赚钱都不错，但要学会 AI绘画 照旧要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料，给那些想学习 AI绘画 的小同伴们一点资助！
需要的可以扫描下方CSDN官方认证二维码免费领取【保证100%免费】

**一、AIGC全部方向的学习路线**
AIGC全部方向的技术点做的整理，形成各个范畴的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证本身学得较为全面。


二、AIGC必备工具
工具都帮大家整理好了，安装就可直接上手！

三、最新AIGC学习笔记
当我学到肯定底子，有本身的理解能力的时间，会去阅读一些前辈整理的书籍大概手写的笔记资料，这些笔记详细纪录了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。


四、AIGC视频教程合集
观看全面零底子学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从底子到深入，照旧很轻易入门的。

五、实战案例
纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将本身的所学运用到现实当中去，这时间可以搞点实战案例来学习。

这份完备版的学习资料已经上传CSDN，朋友们假如需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】


免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。



欢迎光临 ToB企服应用市场:ToB评测及商务社交产业平台 (https://dis.qidao123.com/) Powered by Discuz! X3.4