qidao123.com技术社区-IT企服评测·应用市场

标题: ComfyUI零基础入门搭建教程 [打印本页]

作者: 花瓣小跑 时间: 2024-8-24 18:45
标题: ComfyUI零基础入门搭建教程
一、先容

ComfyUI 是一个强大的、模块化的 Stable Diffusion 界面与后端项目。该用户界面允许用户使用基于图形/节点/流程图的界面设计和实行高级稳固的扩散管道。该项目部门别的特点如下：

目前全面支持 SD1.x，SD2.x，SDXL，SD3，Stable Video Diffusion 和 Stable Cascade
命令行选项： --lowvram 使其在显存小于 1GB 的 GPU 上运行（在显存较低的 GPU 上主动启用）
即使没有 GPU，也可以工作： --cpu （慢）
可以加载 ckpt、safetensors 和 diffusers models/checkpoints。独立 VAE 和 CLIP 模型
从生成的 PNG 文件加载完整的工作流程（带有种子）
将工作流程生存/加载为 Json 文件

二、容器构建说明

1. 摆设ComfyUI

（1）使用命令克隆ComfyUI

git clone https://github.com/comfyanonymous/ComfyUI.git
cd ComfyUI

复制代码

（2）安装 conda（如已安装则跳过）

下面必要使用 Anaconda 或 Mimiconda 创建假造环境，可以输入 conda --version 进行查抄。下面是 Mimiconda 的安装过程：

下载 Miniconda 安装脚本

wget https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh

复制代码

运行安装脚本

bash Miniconda3-latest-Linux-x86_64.sh

复制代码

遵照安装提示并初始化

按 Enter 键检察许可证条款，阅读完毕后输入 yes 接受条款，安装完成后，脚本会询问是否初始化 conda 环境，输入 yes 并按 Enter 键。

运行 source ~/.bashrc 命令激活 conda 环境
再次输入 conda --version 命令来验证是否安装成功，假如出现类似 conda 4.10.3 如许的输出就成功了。

（3）创建假造环境

输入下面的命令：

conda create -n comfyui
conda activate comfyui

复制代码

（4）安装pytorch

pip install torch torchvision torchaudio --extra-index-url https://download.pytorch.org/whl/cu121

复制代码

（5）安装项目依靠

pip install -r requirements.txt

复制代码

此时所需环境就已经搭建完成，通过下面命令进行启动：

python main.py

复制代码

访问网址得到类似下图界面即表现成功启动：

2. 下载stable diffusion 3的干系内容

（1）下载模型SD3

访问 Hugging Face 搜刮“stable-diffusion-3-medium”下载 Stable Diffusion 3 的干系模型。首次访问该页面时，大概必要同意用户协议才能看到模型下载页。
官方提供了4个模型：

①由名字可以看出模型“sd3_medium”不带任何文本编码器，因此要使用的话必要下载 text encode 文件夹下的四个文件；
②模型“sd3_medium_incl_clips”可以直接生成图像，但不包含 T5xxlf的的文本编码器，所以性能会轻微差一些，但是必要的资源设置也会比较少；
③另外两个大模型类似v1.5 和 XL，可以直接用于图像生成。区别在于 T5xxlf编码器的浮点数不同，理论上 15GB 的stable-diffusion-3-medium的模型对语义的理解效果最好，但也最耗资源。
将适合自己的模型下载到 ComfyUI/models/checkpoint下。注：假如选择了不带clip的模型，则必要搭配 text_encoders中的文件，下载到 ComfyUI/models/clip文件下