Stable Diffusion绘画 | LCM模型:实现秒出图

守听  金牌会员 | 2025-1-18 13:46:51 | 显示全部楼层 | 阅读模式
打印 上一主题 下一主题

主题 873|帖子 873|积分 2619

在过往,不管使用 SD 还是 MJ,生成一张图片起码要等上10秒。
而现在,有了 LCM 技能的加持,已经能做到秒出图,甚至是实时出图。
LCM(潜空间同等性模型) 是由 清华大学信息科学技能研究院 研发的大模型,它最大的特点就是生成图片速度超等快,能在2-4步生成质量不错的图片。
安装部署

LoRA下载

Latent Consistency Model (LCM) LoRA: SDXL 下载链接:
https://huggingface.co/latent-consistency/lcm-lora-sdxl/tree/main

Latent Consistency Model (LCM) LoRA: SDv1-5 下载链接:
https://huggingface.co/latent-consistency/lcm-lora-sdv1-5/tree/main

以上两个模型下载后,放置位置:SD安装目次\models\Lora\lcm
模型下载

目前唯一支持 SD webui 的LCM模型:LCM_Dreamshaper_v7
下载链接:https://huggingface.co/SimianLuo/LCM_Dreamshaper_v7/tree/main
模型下载后,放置在:SD安装目次\models\Stable-diffusion

sd-webui-lcm 插件

PS:LCM_Dreamshaper_v7 模型不能直接使用,需要搭配 sd-webui-lcm插件 使用。
下载链接:https://github.com/0xbitches/sd-webui-lcm
插件下载解压后,放置在:SD安装目次\extensions

修改代码

在 SD安装目次\modules 中找到 sd_samplers_extra.py 与 sd_samplers_kdiffusion.py 两个文件。

在修改之前,切记要把这两个文件举行复制备份,以免改坏了还能还原返来。
sd_samplers_kdiffusion.py 修改:
在对应位置添加代码后保存:('LCM', sd_samplers_extra.sample_lcm, ['k_lcm'], {}),

sd_samplers_extra.py 修改:
在如下位置添加代码后保存:
  1. @torch.no_grad()
  2. def sample_lcm(model, x, sigmas, extra_args=None, callback=None, disable=None, noise_sampler=None):
  3.     extra_args = {} if extra_args is None else extra_args
  4.     noise_sampler = k_diffusion.sampling.default_noise_sampler(x) if noise_sampler is None else noise_sampler
  5.     s_in = x.new_ones([x.shape[0]])
  6.     for i in tqdm.auto.trange(len(sigmas) - 1, disable=disable):
  7.         denoised = model(x, sigmas[i] * s_in, **extra_args)
  8.         if callback is not None:
  9.             callback({"x": x, "i": i, "sigma": sigmas[i], "sigma_hat": sigmas[i], "denoised": denoised})
  10.         x = denoised
  11.         if sigmas[i+1] > 0:
  12.             x += sigmas[i+1] * noise_sampler(sigmas[i], sigmas[i+1])
  13.     return x
复制代码

LCM 速度测试

输入一段提示词,把 LoRA 添加进来:

按照下图修改配置参数:

用时 3.6s 就能出图:

差别采样器出图效果对比:

再来看看,差别迭代步数的出图效果对比:



当 迭代步数 达到4步时,图片已达到基本可用的程度,
在 5步 之后,每增加 1步,画面会更加锐利,
增加到 第9步 之后,继续增加迭代步数,画质提拔不太明显。
LCM 技能的参加,确实能提高出图效率,
尽管生成图片的质量不算太高,但在该技能的帮助下,我们完全可以使用较低的步数,快速的大批量出图,
然后再挑选满意的图片举行高清放大处置惩罚,有效避免了不断重复抽卡的烦恼。
今天先分享到这里~

开启实践:SD绘画 | 为你所做的学习过滤

免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
回复

使用道具 举报

0 个回复

倒序浏览

快速回复

您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

守听

金牌会员
这个人很懒什么都没写!

标签云

快速回复 返回顶部 返回列表