勿忘初心做自己 发表于 2024-8-16 10:57:39

Stable Diffusion WebUI v1.10.0巨大更新,支持SD3!

前言

Hello,大家好!前不久,SDWebUI的作者AUTOMATIC1111终于把它更新到了v1.10.0,这次不但修复以往的一些BUG,提升了一些性能,这次还支持了SD3_medium.safetensors模子以及SD3_LoRA模子,同时还支持T5系列的encoder模子,让我们一起来看看这次更新了哪些内容。
更新内容
统共有87项更新:
1. 特性更新(Features):统共3项;
2. 次要更新(Minor):统共13项;
3. 扩展和API更新(Extensions and API):统共2项;
4. 性能提升(Performance):统共9项;
5.错误修复(Bug Fixes):统共35项;
6. 其他(Other):统共25项。
我来为大家解说一下最重要的特性更新。
特性更新:


[*] 支持 Stable Diffusion 3
[*] 保举使用 Euler sampler; DDIM 和其他 timestamp samplers 目前不支持
[*] T5 文本模子默认禁用,可在设置中启用
[*] 新的 schedulers(调理器):
[*] Align Your Steps
[*] KL Optimal
[*] Normal
[*] DDIM
[*] Simple
[*] Beta
[*] 新的 sampler(采样器): DDIM CFG++
如何使用SD3-medium模子
特别提示:在SDWebUI中使用SD3模子你会遇到许多的报错,比如:署理问题,库辩说问题,版本辩说问题,如果遇到这些问题,千万别花时间去折腾或者去提问(没必要浪费时间),最好的办法是直接重新安装秋叶启动器,半小时搞定。
如何重新安装看往期文章
Stable Diffusion Web UI快速安装
https://img-blog.csdnimg.cn/img_convert/1869e9db0813d43ddc3f6d8f85e0ce40.png
起首,我们先到抱抱脸(HuggingFace)找到SD3的源生模子,下载该模子以及其配套的CLIP模子。
https://img-blog.csdnimg.cn/img_convert/6c473b957aac58ecd9891b90d2cab01b.png
https://img-blog.csdnimg.cn/img_convert/0fe921a3776cdaa9f48c15892b10011f.png
然后,下载上图红框中的SD3模子,以及CLIP模子(由于这次SD3的架构和以往版本的架构完全不一样,以是CLIP模子是必须要下载的)。
https://img-blog.csdnimg.cn/img_convert/2440c5b50488ae5cebcd626bca7afde1.png
在下载模子的同时,我们打开秋叶大佬的绘世启动器,升级SDwebUI内核到v1.10.0。
https://img-blog.csdnimg.cn/img_convert/72c618adc742eed48761d250bc3649b9.png
https://img-blog.csdnimg.cn/img_convert/416af05f5151c7e50600b0e1b7af65e0.png
升级完成后,我们在绘世启动器的根目录下找到models文件夹,在该文件夹内新建一个文件夹取名为CLIP,一会所有的CLIP模子都要放在该文件夹内。
https://img-blog.csdnimg.cn/img_convert/d2da91ea679678cd7bb41ef45d1c8630.png
把抱抱脸下载的SD3模子放在stable-diffusion这个文件夹内,齐备就绪就可以调用SD模子了。
https://i-blog.csdnimg.cn/direct/6910fa3cc0ea42ef9b5ad6375e5a759f.png
要使用T5xxl模子的,需要在设置里打开T5选项,才气调用。
Tips:在第一次使用SD3模子的时间,后台会下载一个vaeapprox-sd3.pt文件,这里需要开魔法。
SD3天生图片示例
https://img-blog.csdnimg.cn/img_convert/f22a0457ac04b9cfbecb2aa72e5ae7b5.png
模子:sd3_medium_incl_clips
Sampling:Euler
Schedule:Auto
Steps:38
CFG:7
mushroom cityscape, mushroom architecture, intricately detailed, surreal mushroom cityscape, glowing luminescence, vibrant colors, complex background, photorealistic, cinematic composition, macro shot, light reflections, ethereal atmosphere, aerial view, Chiaroscuro Lighting Style, partially covered in shadow
https://img-blog.csdnimg.cn/img_convert/24dde1fe099d32caf2fb384df519f9bd.png
模子:sd3_medium_incl_clips
Sampling:Euler
Schedule:Auto
Steps:38
CFG:7
2 full of colorpalette rippled layers, clouds, vines, swirls, curves, ultra fine detail, swirling clouds, Artstation trending, art nouveau, raytracing, highly detailed and intricate, golden ratio, dark gradient ink with intricate designs, hypermaximalist, luxury, elite, japanese castle, majestic, ephemeral, opalescenct, labradorite, cinematic, cgsociety, Victo Ngai and John Howe and Paul Serusier and Jeehyun lee and Louise Nevelson and Hokusai and Mike Mignola : : surreal portal a wonderous japanese castle, style of Laurie Greasley and Satoshi Kon : : wooden sculpt, moon core data chart of abstract symbols fused with Japanese landscape portal fused with geo strata drip, text cascade, glitch cascade, Japananese fusion , sunbleached, high definiton.
https://img-blog.csdnimg.cn/img_convert/0599f7d389e25d12f5451293c94b2394.png
模子:sd3_medium_incl_clips_t5xxlfp16
Sampling:Euler
Schedule:Auto
Steps:42
CFG:7.5
次要更新:


[*] 选项可跳过早期步调的 CFG
[*] 添加 --models-dir 选项
[*] 答应移动用户通过双指按压打开上下文菜单
[*] Infotext: 为绑定的 Textual Inversion 添加 Lora 名称作为 TI hashes
[*] 下载模子后检查哈希值以防止下载损坏
[*] 更多扩展标签过滤选项
[*] 生存 AVIF 时,使用 JPEG 的质量设置
[*] 添加文件名模式:
[*] 为 SDXL 的 clip L 添加启用 clip skip 的选项
[*] 天生过程中防止屏幕休眠的选项
[*] 图像检察器中的 ToggleLivePriview 按钮
[*] 移除重新加载和快速滚动时的 UI 闪烁
[*] 禁用生存按钮 log.csv 的选项
扩展和 API:


[*] 添加 process_before_every_sampling 钩子
[*] 在无效 sampler 错误时返回 HTTP 400 而非 404
性能:


[*] use_checkpoint = False
[*] 用 torch 原生操作替换 einops.rearrange
[*] 预计算 is_sdxl_inpaint 标记
[*] 防止不必要的额外网络毛病备份
[*] 添加 --precision half 选项以避免推理过程中的类型转换
[*] LDM 优化补丁
[*] 将 sigmas 保留在 CPU 上
[*] 仅在所有步调完成后检查一次 unet 中的 nans
[*] 为图像天生添加运行 torch profiler 的选项
错误修复:


[*] 修复无完备 infotexts 的网格问题
[*] lora 部分更新优先于完备更新
[*] 修复某些环境下文件扩展名有额外 ‘.’ 的错误
[*] 修复模子初始加载循环损坏问题
[*] 在 API 中答应旧的 sampler 名称
[*] 更多旧 sampler scheduler 兼容性
[*] 修复 Hypertile xyz
[*] XYZ CSV skipinitialspace
[*] 修复 mps 和 xpu 上的软修复,torch_utils.float64
[*] 修复非主分支上的扩展更新
[*] 更新 pickle 安全文件名
[*] 为 webui-assets css 使用相对路径
[*] 创建虚拟环境时,在 webui.bat/webui.sh 中升级 pip
[*] 修复 AttributeError
[*] 在 launch_utils 中为 webui root 使用 script_path
[*] 修复额外批处理惩罚模式 P 透明度
[*] 在 css 中使用 gradio 主题颜色
[*] 修复提示输入中的文本拖动
[*] 为 .mjs 文件添加精确的 mimetype
[*] QOL 项目 - 为 SD 模子、Loras 和 embeddings 更清晰地处理惩罚元数据问题
[*] 用 wslpath 和 explorer.exe 替换 wsl-open
[*] 修复 SDXL Inpaint
[*] 多尺寸网格
[*] 修复 Replace preview
[*] 修复权重分解中的错误比例
[*] 确保在 Mac 和 Linux 上使用虚拟环境中的 python
[*] 在 Linux 和 Mac 上如果同时存在 python3.10 和 python3,优先使用 python3.10(有回退机制)
[*] 克制天生额外内容
[*] 修复 SD2 加载
[*] 修复 hires fix 不同 lora 的 infotext Lora hashes
[*] 修复 sampler scheduler 自动校正警告
[*] 修复重新加载和快速滚动时的 UI 闪烁
[*] 修复放大逻辑
[*] 修复非作业动作上的进度条停止(添加 wrap_gradio_call_no_job)
[*] 修复 OSError: 无法将 P 模式写为 JPEG
其他:


[*] 修复更新日记
[*] ReloadUI backgroundColor --background-fill-primary
[*] 为 Intel 和 ARM Macs 使用不同的 torch 版本
[*] XYZ override 重做
[*] 溢出时滚动扩展表格
[*] img2img 批量上传方法
[*] 根据更新日记同步 v1.8.0 包
[*] 添加 AVIF MIME 类型支持到 mimetype 界说
[*] 更新 imageviewer.js
[*] no-referrer
[*] .gitignore trace.json
[*] 将 spandrel 升级到 0.3.4
[*] 废弃 --max-batch-count
[*] 更新 bug_report.yml
[*] 在不要求升级的环境下保持项目对 Python 3.9 用户的兼容性
[*] 将 ARM Macs 的 torch 更新到 2.3.1
[*] 移除已弃用的设置 dont_fix_second_order_samplers_schedule
[*] 修复拼写错误
[*] 在控制台日记中使用 shlex.join 启动参数
[*] 激活 venv .bat
[*] 在 img2img 中为调整巨细标签添加 ids
[*] 更新 Linux 安装指南
[*] 结实的系统信息
[*] 粘贴修复时不发送图像巨细
[*] 修复 MacOS 的嘈杂 DS_Store 文件
写在末了

这里直接将该软件分享出来给大家吧~
1.stable diffusion安装包

随着技能的迭代,目前 Stable Diffusion 已经能够天生非常艺术化的图片了,完全有赶超人类的架势,已经有不少工作被这类服务替换,比如制作一个 logo 图片,画一张虚拟妻子照片,画质堪比相机。
最新 Stable Diffusion 除了有win多个版本,就算说底端的显卡也能玩了哦!别的还带来了Mac版本,仅支持macOS 12.3或更高版本。
https://img-blog.csdnimg.cn/75b855e8fe994090bc171ed54ef14fa6.png
2.stable diffusion视频合集

我们在学习的时间,往往册本源码难以明确,阅读困难,这时间视频教程教程是就很适合了,生动形象加上案例实战,一步步带你入坑stable diffusion,科学有趣才气更方便的学习下去。
https://img-blog.csdnimg.cn/fefe99631971458f90b032de335ec46c.png
3.stable diffusion模子下载

stable diffusion往往一开始使用时图片等无法达到理想的天生效果,这时则需要通过使用大量训练数据,调整模子的超参数(如学习率、训练轮数、模子巨细等),可以使得模子更好地适应数据集,并天生更加真实、精确、高质量的图像。
https://img-blog.csdnimg.cn/67268b9e3f0c429cb4fc5163ca41b214.png
4.stable diffusion提示词

提示词是构建由文本到图像模子解释和明确的单词的过程。可以把它明确为你告诉 AI 模子要画什么而需要说的语言,整个SD学习过程中都离不开这本提示词手册。
https://img-blog.csdnimg.cn/41a39e7865584357a70fc62e791eed2c.png
5.SD从0到落地实战演练

https://img-blog.csdnimg.cn/1e03ccf74ea449bd98fb308f376b45ef.png
如果你能在15天内完成所有的任务,那你堪称天才。然而,如果你能完成 60-70% 的内容,你就已经开始具备成为一名SD大神的精确特征了。
这份完备版的stable diffusion资料我已经打包好,需要的点击下方插件,即可前去免费领取!
https://i-blog.csdnimg.cn/direct/23d8e9c79b8a4d2391565518b2d654d2.png#pic_center

免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
页: [1]
查看完整版本: Stable Diffusion WebUI v1.10.0巨大更新,支持SD3!