【Stable Diffusion】SD安装、常用模型(checkpoint、embedding、LORA)、提示词具、常用插件

[复制链接]
发表于 2025-5-26 20:41:39 | 显示全部楼层 |阅读模式
Stable Diffusion,一款强大的AI模型,让我们能够创造出惊人的艺术作品。本文将为您先容怎样安装StableDiffusion以及深入利用的学习教程。

1. 安装Stable Diffusion

(主义需要的小伙伴可以文末自行扫描获取)
Stable
Diffusion的安装可能是第一步,但它绝对是重要的一步。以下是一些安装方式:**AutoDL:**AutoD镜像版本,现在维护到V16。镜像地址:AUTOMATIC1111/stable-
diffusion-webui/tzwm_sd_webui_A1111。webui 1.6.0 整合版,支持 SDXL,一键启动,带视频教程。预置
ControlNet v1.1.410 全部模型含 IP-Adapter、汉化、tagger
等常用插件、模型路径优化。有标题可以在微信交换讨论群咨询。
● 秋叶整合包:**可在B站搜索,Stable Diffusion,第一个就是秋叶大佬。Stable
Diffusion整合包有适合差别情况的版本。Stable Diffusion整合包v4.4发布
● 星空大佬:**AI绘画整合包(新增 Controlnet1.1和SadTalker)
● kaggle:**Kaggle上也可以找到稳定的版本。stable-diffusion-webui-kaggle、zh-stable-
diffusion-webui-kaggle
● 腾讯云:**腾讯云也提供了低本钱的Stable Diffusion摆设方式。
2. 模型Checkpoint

Checkpoint文件对于训练模型的作者和利用者都至关重要。它们包含了模型参数和优化器状态等信息,是训练过程中的状态快照。对于利用者而言,可以将

Checkpoint 文件理解为一种风格滤镜,例如肖像、漫画、水墨、写实风等。通过选择对应的 Checkpoint 文件,您可以将 Stable
Diffusion 模型生成的结果转换为您所选择的特定风格。
下载Checkpoint文件时,请查看相干的模型阐明,作者通常提供了文件和利用阐明,以资助您更好地利用和理解文件。

Checkpoint按画风可以分为三类:

官方发布的Stable
Diffusion1.4/1.5/2.0/2.1等模型结果都比较一样平常,现在大家用的比较多的,都是私炉模型。现在主流的模型下载网站有:Hugging
Face、Civitai(需要有魔法) 、libilibi等。
3. VAE(变分自解码器)

VAE负责将加噪后的潜空间数据转为正常图像,可以简朴理解为模型的调色滤镜,重要影响画面的色彩质感。现在大多数新模型在文件中已经融合了VAE,另有一些作者会在model
先容中保举合适的VAE。
VAE文件后缀一样平常是.pt,或者是.safetensor,存放路径是将VAE文件也放在models/Stable-
diffusion文件夹下,然后将文件名改成和模型名一致,再在后缀.pt前添加.vae字段,这样就可以在加载模型时选择自动加载VAE了。

4. Embeddings

Embeddings技术可以将输入数据转化为向量表示,以便模型更好地举行处理和生。Embeddings可以用于控制人物特征、动作和风格。与其他模型(如LORA)相比,Embeddings的大小较小,更加方便存储和利用。它通常用于生成特定的样本,而不需要手动输入大量描述词汇。下面是一些常用的Embeddings:
● 特定人物形象:例如Corneo’s D.va,这些Embeddings用于控制特定脚色的特征。
● 风格Embeddings:用于控制生成图片的风格。
● 画风Embeddings:用于赋予生成图片差别的画风。
● 概念(Concept)Embeddings:用于实现差别概念或主题的图片生成。
● 服饰Embeddings:用于控制脚色的服装。

在C站或者liblibai网站上,常用的负面embeddings:
badhandv4、EasyNegativeV2(针对二次元模型训练的,解决肢体混乱、颜色稠浊、灰度非常等等一系列负面标题,触发词easynegative)、Deep
Negative
V1.x(针对真人模型训练的。解决包罗错误的人体解剖布局、令人反感的配色方案、颠倒的空间布局等等标题。触发词NG_DeepNegative_V1_75T。)

5. LORA(Local Operation Repeatedly Applied)
LORA是一种重要的技术,用于改善团体的画风,使生成的图片更具特定特征。LORA模型可以被用来实现以下几种结果:


● 人物脚色LORA:用于控制特定人物的外貌和特征。
● 画风LORA:改变生成图片的团体画风。
● 概念(Concept)LORA:用于实现特定概念或主题的图片生成。
● 服饰LORA:用于控制脚色的服装。


新手必备的lora:
Detail Tweaker LoRA (细节调整LoRA)、leosam’s filmgirl 胶片风 lora、Adjuster 衣物增/减
LoRA、Polaroid LoRA(拍立得LORA)、娜乌斯嘉脚色lora、墨幽脚色LoRa、国风将来lora、汉服宋服lora、小李国风系列。
需要注意的是,在LORA作者的信息总,会先容 LORA 模型对应的底模和触发、权重,需要注意查看。
加载LORA扩展模型方法:
SD1.5版本:我们点击文生图下面赤色小按钮,就可以显示扩展模型选项。
SD1.6版本如下图:点击窗口中的lora,TAB页切换。

点击lora图片上的图标,可在弹出窗口页面维护触发词和权重,下次利用时可自动带出。

在设置——扩展模型中,可以设置一些细节。好比设置模型展示方式是卡牌还是缩略图,卡牌宽高尺寸、LORA模型加载权重等等。

LORA利用先容:
利用真实系大模型+脚色LORA,就可以得到一个真人coser形象。联合controlnet还可以计划脚色的姿势及构图,定制自己的作品。

idillustration互联网插画风模型

真实室内模型_realistic interior design v1

永一丨凤冠霞帔

当想强化作品中某种方面的特质时,可以叠加利用多个lora,例如利用人物+服装+风格lora来生成图片。详细利用时,你可以通过控制差别lora的权重,使得作品更像某一种lora。
6. Hypernetwork



Hypernetwork与LORA类似,但通常用于改善团体的画风,而不是改变画风。Hypernetwork的结果更风雅,可以处理差别画风之间的微小差异。这对于创造特定的画面风格非常有用。

7. 插件安装
为了更好地利用Stable
Diffusion,您可以安装一些插件,例如图库浏览器、提示词补全、提示词反推、局部细节重绘等。这些插件可以提供更多的功能和便捷性。
1. 安装方法:网址安装
打开可安装选框,点击load form就可以看到全部可安装的插件。在搜素框搜索到要安装的插件,点击右侧install就可以自动安装了。

2. 安装方法:可下载-加载可安****装应用

3. 安装方法:下载安装
前两种方式在网络不好时可能会安装错误,更彻底的方式是直接下载插件安装包举行安装。好比将下载好的压缩包解压后放到extensions文件夹下。https://github.com/Physton/sd-
webui-prompt-all-in-one.git
安装完后点击重启webui举行刷新,插件安装正确就会出现在已安装列表中。


如果某个插件不能用了,点击右侧的检查更新按钮,一样平常更新到最新版本就可以解决了。如果某个插件还是有标题,可以点击前面的复选框暂时取消利用。

也可以在启动器中的模型管理–扩展栏目举行更新,卸载。

先容几款常用插件:
中文语言包:搜索zh(取消勾选本地化/Localization的筛选)
图库浏览器:搜索image browser
提示词补全: 搜索tag complete,中文词库见网盘
提示词反推:搜索tagger
Ultimate Upscale脚本:SD upscale升级版,用于图片放大。 搜索ultimate upscale
Local Latent Couple:局部细节重绘,搜索llul
Cutoff:精准控色,防止串色,搜索cut off
prompt-all-in-one:prompt综合插件,《提示词补全插件》
8.提示词工具:
魔咒百科词典、NovelAi魔导书、AI提示词加快器、AI tag生成工具、NovelAI tag生成器 V2.1、:可以简朴生成提示词:

提示词参考网站:Civitai(魔法)
、libilibi、炼丹阁、DesAi、openart(偏欧美)、arthub(偏亚洲)这几个网站都有很多良好的图片可以参考。

总结
Stable
Diffusion是一款令人印象深刻的AI模型,它让我们能够创造出惊人的艺术作品。通过安装合适的Checkpoint文件、利用Embeddings、LORA和Hypernetwork,以及利用插件,您可以发挥Stable
Diffusion的最大潜力,创造出独一无二的艺术作品。
Stable Diffusion正在改变艺术创作的方式,它的潜力无限。让我们一起探索这个充满创意和可能性的世界!
针对各位AIGC初学者,这里列举了一条完备的学习筹划,感爱好的可以阅读看看,盼望对你的学习之路有所资助,废话不多说,进入正题:

目的应该是这样的:
第一阶段(30天):AI-GPT从入门到深度应用

该阶段首先通过先容AI-GPT从入门到深度应用目次布局让大家对GPT有一个简朴的认识,同时知道为什么要学习GPT利用方法。然后我们会正式学习GPT深度玩法应用场景。
-----------


  • GPT的界说与概述
  • GPT与其他AI对比区别
  • GPT超强记忆力体验
  • 万能GPT怎样帮你解决统统标题?
  • GPT表达方式优化
  • GPT多类复杂应用场景解读
  • 3步刨根问底获取终极方案
  • 4步进步本领-GPT高情商沟通
  • GPT深度玩法应用场景
  • GPT高级脚色饰演-讲授老师
  • GPT高级脚色饰演-育儿专家
  • GPT高级脚色饰演-职业顾问
  • GPT高级脚色饰演-专业私家健身锻练
  • GPT高级脚色饰演-心理健康顾问
  • GPT高级脚色饰演-程序UX/UI界面开发顾问
  • GPT高级脚色饰演-产物司理
  • GPT高级本领-游戏IP脚色饰演
  • GPT高级本领-文本冒险游戏引导
  • GPT实操训练-销售行业
  • GPT实操训练-菜谱保举
  • GPT实操训练-美容护肤
  • GPT实操训练-知识问答
  • GPT实操训练-语言学习
  • GPT实操训练-科学减脂
  • GPT实操训练-情感咨询
  • GPT实操训练-私家医生
  • GPT实操训练-语言翻译
  • GPT实操训练-作业辅导
  • GPT实操训练-聊天陪同
  • GPT实操训练-育儿建议
  • GPT实操训练-资产配置
  • GPT实操训练-讲讲课程编排
  • GPT实操训练-运动策划
  • GPT实操训练-法律顾问
  • GPT实操训练-旅游指南
  • GPT实操训练-编辑剧本
  • GPT实操训练-口试雇用
  • GPT实操训练-宠物照顾护士和训练
  • GPT实操训练-吸睛爆款标题生成
  • GPT实操训练-自媒体爆款软件拆解
  • GPT实操训练-自媒体文章创作
  • GPT实操训练-高效写作推广方案
  • GPT实操训练-星座分析
  • GPT实操训练-原创音乐创作
  • GPT实操训练-起名/解梦/写诗/写情书/写小说
  • GPT提升工作效率-Word关键字词提取
  • GPT提升工作效率-Word翻译实现
  • GPT提升工作效率-Word自动填写、排版
  • GPT提升工作效率-Word自动纠错、建议
  • GPT提升工作效率-Word批量生产优质文章
  • GPT提升工作效率-Excel自动化实现数据计算、分析
  • GPT提升工作效率-Excel快速生成、拆分及归并实战
  • GPT提升工作效率-Excel生成复杂任务实战
  • GPT提升工作效率-Excel用Chat Excel让效率起飞
  • GPT提升工作效率–PPT文档内容读取实现
  • GPT提升工作效率–PPT快速批量调整PPT文档
  • GPT提升工作效率-文件批量创建、复制、移动等高效操纵
  • GPT提升工作效率-文件遍历、搜索等高效操纵
  • GPT提升工作效率-邮件自动发送
  • GPT提升工作效率-邮件自动回复
  • GPT接入QQ与QQ群实战
  • GPT接入微信与微信群实战
  • GPT接入QQ与VX多用户访问实战
  • GPT接入工具与脚本摆设实战
第二阶段(30天):AI-绘画进阶实战

该阶段我们正式进入AI-绘画进阶实战学习,首先通过相识AI绘画界说与概述 ,AI绘画的应用范畴 ,PAI绘画与传统绘画的区别 ,AI绘画的工具分类先容的根本概念,以及AI绘画工具Midjourney、Stable Diffusion的利用方法,另有AI绘画插件和模板的利用为我们接下来的实战计划学习做铺垫。


  • -----------
    AI绘画界说与概述
  • AI绘画的应用范畴
  • AI绘画与传统绘画的区别
  • AI绘画的工具分类先容
  • AI绘画工具-Midjourney
  • AI绘画工具-百度文心一格
  • AI绘画工具-SDWebUI
  • AI绘画工具-Vega AI
  • AI绘画工具-微信中的AI绘画小程序
  • Midjourney学习-Discord账号的注册
  • Midjourney Bot界面解说
  • Midjourney提示词入门
  • Midjourney高级提示词
  • Midjourney版本参数学解读
  • Midjourney功能参数
  • Midjourney上采样参数
  • AI绘画组合应用1-Midjourney + GPT
  • AI绘画组合应用2-Stable Diffusion + GPT
  • AI绘画组合应用3-AI绘画+ GPT +小红书
  • AI绘画组合应用4-AI绘画+ GPT +抖音
  • AI绘画组合应用5-AI绘画+ GPT +公众号
  • AI绘画组合应用6-AI绘画+ GPT + AI视频
  • AI绘画组合应用7-AI绘画+ GPT + 小说人物/场景
  • AI绘画计划-Logo计划
  • AI绘画计划-套用万能公式
  • AI绘画计划-引用艺术风格
  • AI绘画计划-GPT加快计划方案落地
  • AI绘画计划-Vega AI渲染线稿生成计划
  • AI绘画计划-摄影
  • AI绘画计划-头像计划
  • AI绘画计划-海报计划
  • AI绘画计划-模特换装
  • AI绘画计划-家具计划
  • AI绘画计划-潘顿椅计划
  • AI绘画计划-沙发计划
  • AI绘画计划-电视柜计划
  • AI绘画计划-包装计划的提示词构思
第三阶段(30天):AI-视频高段位

恭喜你,如果学到这里,你根本可以找到一份AIGC副业相干的工作,好比电商运营、原画计划、美工、安全分析等岗位;如果新媒体运营学的好,还可以从各大自媒体平台劳绩平台兼职收益。
到此为止,大概2个月的时间。你已经成为了一名“AI小子”。那么你还想往下探索吗?


  • -----------
    AI视频界说与概述
  • AI视频制作-方案与创新
  • AI视频制作-各种工具实操
  • AI视频制作-美学风格(油画/插画/日漫/水墨)
  • AI视频制作-形象设定(人物形象服装/造型/表情)
  • AI视频画面特效处理
  • AI视频画面拼接
  • AI视频画面配音
  • AI视频画面包装
  • AI视频锁定人物逐一精修
  • 多种表情动作/情节
  • 动态模型转换-视频内部元素关键帧
  • 动态模型转换-图像团体运动
  • 动态模型转换-假造人
  • 动态模型转换-表面特效
  • AI自媒体视频-深问GPT,获取方案
  • AI自媒体视频-风格设置(诗歌/文言文等)
  • AI自媒体视频-各行业创意视频计划思路
  • AI视频风格转换
  • AI视频字数压缩
  • AI视频同类型衍生
  • AI视频Pormpt公式
第四阶段(20天):AI-假造数字人课程



  • -----------
    AI数字人工具简介
  • AI工作台界面功能展示及先容
  • AI数字人任务确定
  • AI数字人素材预备
  • AI知识、语料的投喂
  • AI模型训练
  • AI训练成果展示及改进
  • AI数字人直播体系工具利用
  • AI人物在各平台直播
  • AI数字人在OBS平台直播
第五阶段(45天以上):AIGC-多渠道变现课程

该阶段是项目演练阶段,大家通过利用之前学习过的AIGC基础知识,项目中分别应用到了新媒体、电子商务等岗位能资助大家在主流的新媒体和电商平台引流和带货变现。
-----------


  • AI-小红书引流变现
  • AI-公众号引流变现
  • AI-知乎引流变现
  • AI-抖音引流/带货变现
  • AI-写作变现
  • AI-B站引流变现
  • AI-快手引流变现
  • AI-百家号引流变现
  • AI-制作素材模板出售变现
  • AI-周边定制变现
  • AI-手机壳图案定制变现
  • AI-周边产物定制变现
  • AI-服装图案定制变现
  • AI-个性头像定制变现
  • AI-起号与知识付费变现
  • AI-实现淘宝销售变现
学习是一个过程,只要学习就会有挑战。天道酬勤,你越积极,就会成为越良好的自己。
如果你能在15天内完成全部的任务,那你堪称天才。然而,如果你能完成 60-70% 的内容,你就已经开始具备成为一名AIGC的正确特征了。
这份完备版的AIGC资料我已经打包好,需要的点击下方二维码,即可前往免费领取!



免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
继续阅读请点击广告

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×
回复

使用道具 举报

© 2001-2025 Discuz! Team. Powered by Discuz! X3.5

GMT+8, 2025-7-21 20:23 , Processed in 0.089899 second(s), 31 queries 手机版|qidao123.com技术社区-IT企服评测▪应用市场 ( 浙ICP备20004199 )|网站地图

快速回复 返回顶部 返回列表