我奶都能看懂的Controlnet简明教程（AI绘画Stable Diffusion最强插件） ...

Ai绘画如今可控性不强是一个共识，绝大部分工具甚至连人物姿势都无法控制，所以每次绘画都是一次开盲盒过程，在这种情况下，很难应用到现实工作中去，许多时间几乎就是一个玩具。
Controlnet的出现，改变了这种局面。它是Stable Diffusion（简称SD）一个至今最为强大的插件，作者叫张吕敏，是一名正在美国读博的年轻中国人，就是下面这个小伙子。

这个插件一经发布，在Ai绘画领域一夜之间风靡天下。
Controlnet通过额外的输入来控制Ai绘画结果，也就是说，绘画师画出的Ai女友，终于可以按照自己的设想摆出各种姿势，画出的房子等事物，终于可以控制在某个设想范围之内，也有网友借助它的强大控制能力开辟出新的插件，使SD已经可以完成视频制作，完成巨大超过。
可以说Controlnet的出现，是Ai绘画进入生产环节的重要标记。
Controlnet直接在SD的Webui界面中使用，必要了解的地方不少，单是它本身可携带的模子数目，如今就高达14个，而且迭代也快，必要时常更新知识才可跟上步调。对初学者来说，是不是感觉有些头大？
现实上，它的模子使用方式大同小异，可以一通多通，学会两三个典范用法之后，其它模子大多不在话下。网络上有许多具体教程，动不动是万字长文，读起来非常费劲，今天的这篇文章，尝试从一个初学者的角度去简化一下。
一、Controlnet夺目啥

使用这个插件起主要了解的是：它主要夺目什么事情。只有先搞清楚这一点，才知道什么时间必要用它。
我在下表尝试去总结一下它的常见能力。必须强调的是，表格中只列出Controlnet能力的一部分，而且为了便于理解而添加的备注，虽然不会离题，但也并非总能完整地涵盖这些模子的所有能力。

作为初学者，了解掌握这些已是一个很好的开端。而且，每一种能力都会有差别的应用，必要在实践中去尝试和机动运用。
二、Controlnet有哪些常用模子

了解了Controlnet的常见能力，你就可以知道自己要的结果能不能通过它来控制实现。上述常见能力，都可以在Controlnet中找到具体的对应模子，对号入座即可。

在这里必要强调一下（敲黑板），Controlnet的使用，在选择模子之前，一般必要先选择对应的“预处理器”，这两者几乎都是“双宿双栖”的。
预处理器的名字前缀，和模子的焦点名称是一致的，比方，如今openpose模子对应的预处理器分别有：openpose_face（脸部）、openpose_full（整体）等几种，可根据具体绘画目标来选择。
另一个重点是（再敲一次黑板），Controlnet的使用一般必要给出参考图（我的界说），引导算法按照参考图来作画。假如你给的图已经是骨骼姿态图/语义分割图（下面会讲），则预处理一栏留空，只需选择对应的模子即可。这一点许多人常常忘记，出来的图偶然间会变得很希奇。
三、Controlnet的使用方法

1.安装
在SD的Webui界面中，在“扩展”标签下输入这个地点安装重启即可。
https://github.com/lllyasviel/ControlNet-v1-1-nightly
如无法下载，请看文末扫描获取插件安装包文件

也可以点击上图“可用”标签后在列表中找到它，点击安装。现实上，假如你用的是整合包，基本会自带这个插件。安装乐成后，因为它有14个可用模子，必要你自行下载，请看文末获取完整模子文件
必要指出的是，这些模子中，名字带有V11P的是稳定版本，可放心使用。如下图框中的文件：

这些文件，只必要下载1.45G体积的谁人即可，设置文件在使用时自动下载匹配。
2.Controlnet根本设置
先看界面（Controlnet版本V1.1.220），主要包括4个地区：

/ 地区1
上传图像区，我在上面将这个图界说为“参考图”，也就是说，这张图是让Controlnet去联合具体的模子，引导控制图片的天生。
比方，你在这里上传了一张人物骨骼图（下图左），选择openpose模子，最终输出了右图结果，复刻了骨骼图的姿势。
/ 地区2
要使Controlnet工作，必须在这个地区勾选“启用”插件，第二项低显存优化很容易理解，但勾选大概会损失一些结果。第三项发起勾选，免去再设置一次图片尺寸，第四项是预览项，可选可不选。
/ 地区3
Control Type控制类型。选择任一种控制类型，下面对应的是细分的预处理器和模子设置。
其中，模子选项是必选的。前者多数时间要选，但一些时间并非必选，前文已有说明。
该地区下面的三项：

后面两项一般情况下保留默认值即可。
/ 地区4
Control Mode，这三项的意思分别是：平衡、形貌词更重要、Controlnet更重要。必要依据输出的图片结果来调整选择，一般默认“平衡”项。后两项也很容易理解，意思是希望绘画更偏重接近形貌词照旧Controlnet控制。
下面是页面缩放选项，一般默认中心项：裁剪和调整大小
3.形貌词和画图参数设置
设置好Controlnet后，还需输入你要天生的画面的正面形貌和反面形貌词，以及设置采样方法、步数、尺寸等，这个模块的具体设置，可参考我之前写的文章。
四、Controlnet的使用案例

讲3个例子：姿势控制、线稿上色、语义分割。
/ 姿势控制
➀上传一张参考人物姿势图（下图左边橙色衣服女人）。
➁选择预处理器和处理模子：openpose_full、openpose，点击预览（赤色火花图标）后，可看到人物姿势转为骨骼图（下图右上）：

➂选择真人绘画模子，输入绘画正反向形貌词，设置参数后天生图片，天生结果如下图（右）

/线稿上色
➀上传线稿参考图（下图左上）
➁选择预处理器和处理模子（均为canny，如图，右上为处理预览）

➂选择动漫类大模子，输入形貌词及设置天生参数后，天生图片，结果如下图：

/语义分割
➀上传一张建筑物参考图
➁选择预处理器和处理模子后天生预览(右上，语义分割图)，如下：

➂选择适合的大模子，输入形貌词及设置天生参数后天生图片，结果如下图：

这里说多一句，在必要高度自界说画面的时间，比方你想设计一个房子的表面，可以自己画出语义分割图后，让SD去天生，可迅速得到大量开端结果图，但要留意的是，语义分割图中的差别颜色，代表的意思并不一样，必要严酷控制准确的颜色值。
我这里也有一张准确颜色对照表，请看下方。

以上用法，适合Controlnet的多数模子，思绪基本一致。当然，它的能力远不止云云，本文只介绍了一些根本知识，回头有空再写一篇进阶教程。
Controlnet的官方中文说明文档，点击本文左下“阅读原文”可达（需科学上网）。
最后提供1个Controlnet输出复杂场景的例子：水浒的风雪山神庙插画（作者@blade2019runner），大家感受一下。
制作底图：

输出结果图：

写在最后

感兴趣的小伙伴，赠送全套AIGC学习资料，包罗AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。

AIGC技术的未来发展前景广阔，随着人工智能技术的不停发展，AIGC技术也将不停进步。未来，AIGC技术将在游戏和盘算领域得到更广泛的应用，使游戏和盘算系统具有更高效、更智能、更机动的特性。同时，AIGC技术也将与人工智能技术精密联合，在更多的领域得到广泛应用，对步伐员来说影响至关重要。未来，AIGC技术将继续得到进步，同时也将与人工智能技术精密联合，在更多的领域得到广泛应用。
 

一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。

二、AIGC必备工具
工具都帮大家整理好了，安装就可直接上手！

三、最新AIGC学习条记
当我学到一定根本，有自己的理解能力的时间，会去阅读一些先辈整理的册本或者手写的条记资料，这些条记具体纪录了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思绪。

四、AIGC视频教程合集
观看全面零根本学习视频，看视频学习是最快捷也是最有结果的方式，跟着视频中老师的思绪，从根本到深入，照旧很容易入门的。

五、实战案例
纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到现实当中去，这时间可以搞点实战案例来学习。

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。