qidao123.com技术社区-IT企服评测·应用市场

标题: AI绘画-【StableDiffusion】从入门到放弃--Lora模子 [打印本页]

作者: 圆咕噜咕噜 时间: 2024-11-3 10:34
标题: AI绘画-【StableDiffusion】从入门到放弃--Lora模子
Stable Diffusion Lora模子，作为AI绘画领域的新宠，正引领着一场视觉艺术革命。它不仅继承了Stable
Diffusion的强大图像生成能力，还通过LoRA技术实现了更精致、更具个性化的图像风格迁移。想要探索这一前沿技术的无限大概吗？本文将带你深入了解StableDiffusion Lora模子，助你解锁AI绘画新境界。
01.认识Stable Diffusion的几种模子
在学习之前我们先来简单看一下SD中可以看到的几种模子。

1.嵌入式(TI.Embedding)：不常用，字面意思是笔墨嵌入，在check
point模子的基础上训练来的，特点是文件格式是pt，体积一般只有几十kb，特殊小。这类模子要放到\embeddings文件夹内。
2.超网络(Hypernetworks)：功能和lora类似，但是不如Lora效果好，所以我们也基本放弃这个模子。这类模子要放到models\hypernetworks文件夹内。
3.大模子：这里是我们常用的大模子。是SD运行的基础，没有它SD无法运行。这类模子要放在models\Stable-diffusion文件夹内。
4.Lora：它是我们除大模子外使用最多的模子，这类模子轻易训练，对电脑配置要求低，文件安全。这类模子要放到models\lora文件夹内。
简单了解完SD总能看到的几种模式之后我们进入正题。
简单来说Lora的作用是帮我固定认为特征，比如相貌，衣服，动作，风格等。
下面这些都是使用了Lora输出的图片。

这里很多人会有一个疑惑，那lora和大模子有什么区别？
我们可以如许明确：
SD官方有自己的大模子，如：SD1.5，SD2.0。这种我们把他明确为我们毛坯房 。
我们经常用的被训练过的大模子，比如：墨幽人造人，麦橘写实，二次元类型的这些，我们明确为在官方模子上训练出来的精装房 。
而Lora模子我们则可以明确为在精装房内举行了**软装，**需要配符合合的大模子来使用。
Lora和大模子一样需要我们自己去下载。常用的网站就是C站，但是由于需要科学上网，大概有些同砚下载不了。
这边给大家预备了一些常用的Lora模子（可以在文末扫描获取）

点击筛选 -点击需要的Lora -点击Download 即可下载。

在下载页面我们还可以看到Trigger Words这一项，这个是Lora的触发词，也要记下来。
需要加入到prompt中才可以触发这个lora。
网上如许Lora都是被人炼制好的，可以直接使用。
后面我们也可以尝试炼制自己的Lora模子。这里就先不讲了，后面我们单独出一期讲如何炼制自己的Lora。
Lora模子如何使用
我们按之前的操作选择大模子和其他参数，然后点击模子中的Lora。

选择一个下要使用的Lora，SD会主动把Lora添加到提示词内。
是Lora的提示词，其中最后的1是表示这个Lora的权重。这个数值最大是1不能超过1，也就是只能往下调。
cshy manakanemumanakanemu,cyan dress,是这个Lora的触发词。有些模子需要搭配触发词才可以使用。
下面是我们生成出来的一组图。可以看到主角的裙子基本是锁定的，这个就是Lora的功劳。

我们还可以尝试多个Lora联合 使用。

在这段提示词中我们使用了两个不同的Lora。
刚才我们说过Lora的权重数值不能超过1。
这个规则在使用多个Lora的时间也是如此 。
多个Lora的权重数值之和不能大于1 。
可以看到这两个Lora的权重我分别设置的是0.5。
生成一下看下效果，这两个提示词没有变革。

Lora使用小本领
在我们模子比较多的时间，可以sd-webui-aki-v4.4\models\Lora文件夹下新建文件夹。

更方便我们快捷找到自己常用的Lora模子。
如何给Lora添加预览图：
选择一张Lora的预览图“.png格式”放到sd-webui-aki-v4.4\models\Lora文件夹下，和Lora模子同名即可。

使用Lora插件
除了上面的方法，再给大家推荐一Lora的插件“Additional Networks ”。
安装方法如下：
点击“扩展 ”-点击“可下载 ”-点击“加载扩展列表 ”。

在下面的列表里找到Kohya-ss Additional Networks 点击后面安装即可。

安装完毕之后需要把Lora文件放到插件的目录下。
也就是把原来在sd-webui-aki-v4.4\models\Lora下的文件。复制到sd-webui-aki-v4.4\extensions\sd-
webui-additional-networks\models\lora这个文件夹下。
然后重启SD应用。就可以使用了。
部分小伙伴安装完了之后，文件也放对位置重启应用之后还是选不了Lora模子，可以点击革新模子列表解决。

最后

假如你是真正有耐烦想花功夫学一门技术去改变现状，我可以把这套AI教程无偿分享给你，包罗了AIGC资料包罗AIGC入门学习头脑导图、AIGC工具安装包、佳构AIGC学习册本手册、AI绘画视频教程、AIGC实战学习等。
这份完备版的AIGC资料我已经打包好，长按下方二维码，即可免费领取！

【AIGC全部方向的学习门路头脑导图】

【AIGC工具库】

【佳构AIGC学习册本手册】

【AI绘画视频合集】

这份完备版的AIGC资料我已经打包好，长按下方二维码，即可免费领取！

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。

欢迎光临 qidao123.com技术社区-IT企服评测·应用市场 (https://dis.qidao123.com/)