『Stable Diffusion』文生图进阶:高分辨率图片生成技巧与实战指南
本文简介在Stable Diffusion中生成高分辨率图片是很多用户的目标。本文将分享实用技巧与工具,助你轻松突破分辨率限制,创作出更清晰、细节丰富的AI艺术作品!
在利用 SD 文生图功能时,我们能选得大模子大致有两类,一类是普通模子,另一类是更加新的 SDXL 模子。
普通模子就是 SD 的一些旧版模子,是将 SD 1.5 或 SD 2.0作为底模开发出来的模子。这类模子也是我们现阶段用得最多的模子。它的底子分辨率是
512 x 512 像素。
如果我们需要将增加图片分辨率,直接修改文生图的
width 和 height 出来的结果并不会很好。偶然候会还会出现多头的环境,比方下图这种环境。
https://img-blog.csdnimg.cn/img_convert/3205c9d7275b767a61363725e60f6af0.webp?x-oss-process=image/format,png
出现这种环境的原因是画面变大了,人家原本善于绘画的尺寸是 512 x 512 ,而你现在一下子就将画布变大了很多,AI
自由绘画的像素点就变多了,这就有大概出现不公道叠加等问题。
高清修复功能 Hires. fix
介绍
那如果需要生成一张高分辨率的照片,又不想出现这种诡异的环境要怎么办呢?
我们可以利用 SD 提供的 Hires. fix 功能去放大图片。
也就是我们先生成图片,基于这个图片的内容选择一个放大算法去提拔图片的分辨率,然后基于这个底子上再团体重画图片。
看看这个实例:
https://img-blog.csdnimg.cn/img_convert/16c47675b7718b7e999ba2da48eb703f.webp?x-oss-process=image/format,pnghttps://img-blog.csdnimg.cn/img_convert/244ea5bb06f8ee70272e4adc649114ab.webp?x-oss-process=image/format,png768 x 5121536 x 1024 左图的分辨率是 768 x 512,右图利用了 Hires. fix 功能放大了 2 倍。
在利用 Hires. fix 出来的结果是不错的,细节也更加丰富,但随之而来的缺点也很显着,启用了 Hires. fix
对图片举行放大,出图的时间会大幅增长,设置不高的设备甚至会爆显存。如果设置不高的电脑只管不要将图片放大得太多,建议不超2倍。
实操
接下来是实操环境。
咒语:
(best quality, masterpiece, perfect face, beautiful and aesthetic:1.2, colorful, dynamic angle), handsome beautiful woman humanoid woman robot part metal wires with wavy short dark hair, elegant, red lighting, realistic, concept art, smooth, detailed, high quality, alphonse mucha and waterhouse,, <lora:add_detail:0.5>, (high contrast, official art, extreme detailed, highest detailed)
Negative prompt: portrait, doll, (leaning against wall:1.3), (asian, chinese:1.3), (worst quality, low quality), FastNegativeV2
Steps: 20, Sampler: DPM++ 2M SDE, Schedule type: Exponential, CFG scale: 6, Seed: 2055601004, Face restoration: CodeFormer, Size: 768x512, Model hash: 07341fcad2, Model: aniverse_v30Pruned, Downcast alphas_cumprod: True, Version: v1.9.3
* 1
* 2
* 3
* 4
本例用到的模子下载地点:文末领取~!
首先我们导入咒语,你也可以设置本身的提示词和参数。然后设置图片的宽高。这里我选择的是 768 x 512 ,也就是一张横屏的图片。
https://img-blog.csdnimg.cn/img_convert/2884813a843b3e48fd665bbb17cf2462.webp?x-oss-process=image/format,png
然后选择上图中红框上方的 Hires. fix。选中后展开它,在 Upscale by 这一项中设置 2 ,也就是等比放大2倍。
https://img-blog.csdnimg.cn/img_convert/d8ce45b229c0ee898a01d134e3a4f3e8.webp?x-oss-process=image/format,png
接着我还将 Denoising strength 设置成 0.6
,这个参数的意思是重绘幅度。在高清修复后还会对图片举行团体重绘,这个数值越高,重绘出来的图片就会和原图相差很大。
最后点击生成按钮。
https://img-blog.csdnimg.cn/img_convert/e65d77a95d27b46a39192c90b9198328.webp?x-oss-process=image/format,png
Hires. fix 参数解说
在 Hires. fix 面板中还有很多参数可以设置。
放大算法 Upscaler
Upscaler 选项中可以选择差别的高清算法对图片举行放大。
[*]Latent:Latent开头的算法是一种简单直接的放大算法,对电脑设置要求不高,速度很快 ,但出图结果不是很好 ,大概会出现模糊不清晰等环境。
[*]Lanczos:当放大图像时,它通过盘算权重,在原图的每个像素周围插入新的像素;当缩小图像时,它会从原图每个像素周围的像素中选择一个值来更换这个像素。这个算法的运算速度也算快 ,出图结果也还行 ,能用。
[*]Nearest:是一种插值算法,通过缩放系数盘算目标图像在原图中的坐标位置,然后找到原图中距离该位置最近的像素值,将其作为目标图像当前像素的数值。运算速度很快 ,但大概会产生锯齿或者块状瑕疵 ,结果不太好。
[*]ESRGAN_4x:通过学习低分辨率图像与其对应高分辨率图像之间的映射关系,实现从低分辨率图像到高分辨率图像的映射过程,进而实现图像的超分辨率。分辨率最高可增强4倍,但大概会出现锐化结果。适合油画风 。
[*]LDSR:通过练习的潜伏扩散模子来提拔图像的分辨率,出图结果很好 ,出图的细节全给你拉满,但很吃电脑资源,运算速度也很慢,可以用龟速 来形容了。
[*]R-ESRGAN 4x+:通过引入残差连接和递归布局,并利用生成对抗网络举行练习,在提高图像分辨率的同时也美满了图像细节,生成图像的质量比传统方法更高 ,推荐。
[*]R-ESRGAN 4x+ Anime6B:是 R-ESRGAN 4x+ 的一个衍生版本,修复二次元漫画的结果很好 。
[*]ScuNet GAN:可以去除图像噪声,同时保留原始细节,但速度慢。可以去除照片和绘画的早点。不太适合二次元漫画 ,但也勉强能用。
[*]ScuNET PSNR:降噪结果很好,适用于需要保持更多图像细节、纹理、颜色等信息的处置惩罚场景,速度也很慢。不适合二次元漫画 。
[*]SwinIR 4x:可将低分辨率图像发达为原来的4倍,生成高分辨率图像。可增强图像的真实感和清晰度。适用于图像重修、图像增强和图像超分辨率等方面,但出图速度很慢,适合修复绘画,不适合二次元漫画 。
在利用 Hires. fix 放大算法之前可以看看你正在利用的模子的作者有没有推荐利用什么放大算法,如果有的话就按照作者推荐的去选择就好了。
在写本文时,为了快速生成图片所以才选了 Latent。
放大倍数和手动调整宽高
放大倍数:通过调整 Upscale by 可以等比放大原图,这个参数是比力常用的。但电脑设置不太高的工友建议不要把该值设置得大于2。
手动调整宽高:Resize width to 和 Resize height to 可以分别调整图形的宽和高,会修改原图的比例。不建议利用。
设置了 Resize width to 和 Resize height to 后,Upscale by 就不见效了。
高分迭代步数 Hires steps
Hires steps 是高分迭代步数,默认值是0,0的意思是利用文生图设置的迭代步数。
如果你重新设置这个值,它生成的画质就会有所差别,数值越高出来的图片精致度就越高。但数值也不是设置得越高越好,比如某些图片设置了60,出来的结果和你设置30是差别不大的。但数值越高出图速度也就越慢。是有边际效应的。
重绘幅度 Denoising strength
Denoising strength 重绘幅度,这个值会影响出图结果。数值远大,出来的图片和原图的差距就越大。
如果不想改变原图的结果这个数值可以设置在0.5以下。但 Denoising strength
的值终极设置多少合适,照旧要看你利用了什么底模,偶然候设置得太小出来的结果也会很奇怪,画面四周的像素大概会出现很模糊的环境。比方下图是将该值设置成0.3的结果。
https://img-blog.csdnimg.cn/img_convert/64c32405d6b13df4e79f25cf38cf0ec2.webp?x-oss-process=image/format,png
可以看到这个图片的质量并不是很好,脸部细节确实更清晰了,但衣服和背景都糊了。
具体照旧要看你生成的图片风格再做参数的微调。
高分模子 Checkpoint
https://img-blog.csdnimg.cn/img_convert/f7f53f99888a7e79ce6d35110124b44f.webp?x-oss-process=image/format,png
最后还可以通过选择差别的模子、差别的模子采样算法、正反向提示词对原图举行修改。这意味着你可以基于原图的底子上举行调整。
但默认是没有上图这些选项的,需要在 设置里手动开启 Hires fix: show hires checkpoint and sampler selection 和 Hires fix: show hires prompt and negative prompt,然后保存并重启UI。
https://img-blog.csdnimg.cn/img_convert/5e71cf308f4d473bd54f5d1f01bb4a86.webp?x-oss-process=image/format,png
比如我想将上图人物的头发改成粉色,那么我在正向提示词里输入 pink hair ,生成的人物头发就出现一丝粉色。
https://img-blog.csdnimg.cn/img_convert/a5f5d3cb3fc6c6a26e14a46d6fd1f55a.webp?x-oss-process=image/format,png
注意,是在Hires. fix 的正向提示词输入框里输入提示词,而不是在原来底模下方的输入框输入!!!
https://img-blog.csdnimg.cn/img_convert/26239e815679e703118cc84961561e2d.webp?x-oss-process=image/format,png
关于AI绘画技能储备
学好 AI绘画 岂论是就业照旧做副业赚钱都不错,但要学会 AI绘画 照旧要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点资助!
这份完整版的SD整合包已经上传CSDN,朋侪们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】
https://i-blog.csdnimg.cn/direct/46cc077091e341748859f105d8d1b90e.png
对于0底子小白入门:
如果你是零底子小白,想快速入门AI绘画是可以思量的。
一方面是学习时间相对较短,学习内容更全面更会合。
二方面是可以找到适合本身的学习方案
包括:stable diffusion安装包、stable diffusion0底子入门全套PDF,视频学习教程。带你从零底子系统性的学好AI绘画!
零底子AI绘画学习资源介绍
页:
[1]