ToB企服应用市场:ToB评测及商务社交产业平台

标题: 【Stable Diffusion】最新换脸模子:IP-Adapter Face ID Plus V2 WebUI 效 [打印本页]

作者: 天津储鑫盛钢材现货供应商    时间: 9 小时前
标题: 【Stable Diffusion】最新换脸模子:IP-Adapter Face ID Plus V2 WebUI 效
ControlNet 是 Stable Diffusion Web UI 中功能最强大的插件。基于 ControlNet 的各种控制范例让 StableDiffusion 成为 AI绘图工具中最可控的一种。
IP Adapter 就是此中的一种非常有用的控制范例。它不但能够实现像 Midjourney 一样的“垫图”功能,还能用来给肖像人物换脸。
IP Adapter 的很多老的模子都可以用来换脸,如 Plus Face。然而,IP Adapter
不停推出了更新的模子,连续为我们带来惊喜。通过我的亲身测试,我发现新的 Face ID Plus V2 模子在换脸效果上远胜以往。
我尝试将好莱坞女星 Angelina Jolie的脸部特征融合到了由Midjourney 天生的多个图片中,包括一名中世纪女战士、一幅文艺复兴时期的美女肖像,以及一位女王的形象,效果都非常令人满意。



怎么样?效果还不错吧?接下来我来介绍如何在 Web UI 中安装并利用这个模子。
准备工作

我们主要利用 Control Net 中的 IP Adapter 来举行换脸,同时利用 OpenPose 保持原图人物的头部姿势。

相对于 Control Net 的其他控制范例,IP Adapter 是后来才有的。如果你的 Control Net 版本较旧,可能需要更新以支持 IP
Adapter 功能。
我们需要下载以下内容:


此中 IP Adapter 用来换脸,Open Pose 用来保持住原图人物的头部姿势。Lora 可以提升面部 ID 的同等性。
这些文件都可以在 Hugging Face 上找到,接下来我将介绍如何下载和安装。
下载模子和Lora

获取 Open Pose 模子

1️⃣ 首先,访问 HuggingFace 网页 ,定位到 Control Net 模子的下载页面。这里列出了所有 Control Net
的根本模子及其配置文件。
2️⃣ 在页面中向下滚动,搜索包含“Open Pose”关键词的文件。
3️⃣ 你会发现有两种文件范例:以 .pth 结尾的是模子文件,而以 .yaml 结尾的则是模子的配置文件。通常,.yaml 配置文件已经在
Control Net 安装时包含在内,因此我们主要关注的是下载 .pth 结尾的模子文件。

4️⃣ 点击下载按钮开始下载所需的 .pth 文件。
5️⃣ 下载完成以后,放在 stable-diffusion-webui\extensions\sd-webui- controlnet\models文件夹。
下载 IP Adapter 需要的 Face ID 模子和 Lora

1️⃣ 继承访问另一个HuggingFace 下载页面 ,寻找 IP Adapter Face ID Plus sd15 和 sd15 lora
文件。这些文件专为 sd 1.5 的模子设计,提供了良好的性能和对 Control Net 其他控制范例的支持。
2️⃣点击下载按钮,开始下载这些文件。留意,sd15 代表这些文件适用于 sd 1.5 版本的模子,而不是 sdxl 版本。

3️⃣Lora 文件特殊用于提升面部 ID 的同等性,对于提高换脸效果的自然度非常关键。
4️⃣下载完成以后,以.bin结尾的模子文件放在 stable-diffusion-webui\extensions\sd-webui- controlnet\models文件夹。
5️⃣ 以.safetensors结尾的Lora文件放在 stable-diffusion-webui\models\Lora文件夹。
安装 InsightFace

如果你在利用FaceID的过程中可能会遇到终端提示No module named 'insightface'的错误,如下图所示。

这时间你需要安装 InsightFace。Stable Diffusion 很多换脸的插件都会用到它,比如 Reactor。
GitHub 上有个 Issue专门讨论这个题目。用户MMoneer给出了如下解决方案:
1️⃣下载预编译的 Insightface 软件包
2️⃣下载后将其放入 stable-diffusion-webui 的根文件夹("webui-user.bat "文件地点文件夹)
3️⃣在 WebUI的根目录分别运行CMD和.\venv\Scripts\activate。
4️⃣ 升级一下Pip:python -m pip install -U pip。
5️⃣取决于你的Python版本,运行下面两个代码的此中一个:pip install
insightface-0.7.3-cp310-cp310-win_amd64.whl (对于3.10) 或者 pip install
insightface-0.7.3-cp311-cp311-win_amd64.whl (对于3.11)。
换脸实操

在开始换脸操纵之前,准备工作是必不可少的。这不但包括了模子的下载和安装,也涉及到被换脸图片的预处理。接下来,我会详细介绍从准备头像到在 Web UI
中举行换脸的整个流程。
准备头像

1️⃣选择了好莱坞明星 Angelina Jolie 的头像作为换脸的源图片。但发现原图偏亮,这可能会导致换脸后的图像在脸部区域过亮。
2️⃣为相识决这个题目,我利用 PS 对头像的亮度举行了调解,将其降至均匀程度,并对脸部的高光区域举行了调暗处理。

选择模子

1️⃣图片处理完毕后,进入 Stable Diffusion 的 Web UI 界面。
2️⃣在这里,需要选择一个适合举行写实风格天生的 SD 1.5 模子。我个人选择的是 cyber realistic
模子,但大家可以根据自己的需求选择其他模子,比较差别模子的效果。
3️⃣在提示词区域暂时不输入任何内容,直接转向我们之前下载的 Lora 文件,这个文件用于加强脸部的同等性。
4️⃣ 点击“Lora”选项,选择我们下载的 face_id_plus_v2_sd15_lora 文件。选中后,Lora 将会被添加到提示词输入框中。
5️⃣接着,通过按住 Ctrl 键并利用向下方向键,调解 Lora 的权重,发起设置在 0.5 到 0.7 的范围内。

局部绘制设置

1️⃣接下来的步调是点击“局部绘制”选项,这一功能答应 Stable Diffusion 专注于重绘特定的面部区域。
2️⃣上传想要被换脸的图片,然后利用画笔工具在人物的脸部区域举行标志。为了更好地实现融合效果,标志的区域可以得当大一些。

通过上述步调,我们完成了换脸操纵的所有准备工作,包括头像的预处理和在 Web UI 中的设置。下一步,我们将进入现实的天生过程,利用 Stable
Diffusion 的强大功能,为 Angelina Jolie 创建全新的面貌。
局部重绘的参数设置

举行局部重绘时,正确的参数设置可以明显提升换脸效果的自然度和细节。以下是详细的参数调解指南:


设置第一个ControlNet: IP-Adapter

接下来是 IP-Adapter 的配置,这一步调确保了换脸操纵可以准确地识别和应用面部特征。

设置第二个 Control Net: OpenPose

在完成了首个 Control Net 的配置后,我们进入到设置第二个 Control Net 的步调,这次是为了利用 OpenPose
保持人物头部姿势的自然和同等性。这一步调对于确保换脸后的图像在姿势上与原始图像保持同等非常关键。

天生图片

完成两个 Control Net 的设置之后,我们准备好天生终极的图片了:


结果评估与调解


通过仔细配置 Open Pose 和 IP Adapter 的 Control
Net,我们能够确保换脸效果不但在视觉上令人满意,而且在姿势和心情上也与原图保持高度同等,从而实现了高质量的换脸效果。
针对各位AIGC初学者,这里列举了一条完备的学习计划,感爱好的可以阅读看看,渴望对你的学习之路有所资助,废话不多说,进入正题:

目标应该是如许的:
第一阶段(30天):AI-GPT从入门到深度应用

该阶段首先通过介绍AI-GPT从入门到深度应用目录布局让大家对GPT有一个简单的熟悉,同时知道为什么要学习GPT利用方法。然后我们会正式学习GPT深度玩法应用场景。
-----------

第二阶段(30天):AI-绘画进阶实战

该阶段我们正式进入AI-绘画进阶实战学习,首先通过相识AI绘画定义与概述 ,AI绘画的应用范畴 ,PAI绘画与传统绘画的区别 ,AI绘画的工具分类介绍的基本概念,以及AI绘画工具Midjourney、Stable Diffusion的利用方法,还有AI绘画插件和模板的利用为我们接下来的实战设计学习做铺垫。

第三阶段(30天):AI-视频高段位

恭喜你,如果学到这里,你基本可以找到一份AIGC副业相关的工作,比如电商运营、原画设计、美工、安全分析等岗位;如果新媒体运营学的好,还可以从各大自媒体平台劳绩平台兼职收益。
到此为止,大概2个月的时间。你已经成为了一名“AI小子”。那么你还想往下探索吗?

第四阶段(20天):AI-虚拟数字人课程


第五阶段(45天以上):AIGC-多渠道变现课程

该阶段是项目演练阶段,大家通过利用之前学习过的AIGC根本知识,项目中分别应用到了新媒体、电子商务等岗位能资助大家在主流的新媒体和电商平台引流和带货变现。
-----------

学习是一个过程,只要学习就会有挑衅。天道酬勤,你越积极,就会成为越优秀的自己。
如果你能在15天内完成所有的任务,那你堪称天才。然而,如果你能完成 60-70% 的内容,你就已经开始具备成为一名AIGC的正确特征了。
这份完备版的AIGC资料我已经打包好,需要的点击下方二维码,即可前去免费领取!



免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。




欢迎光临 ToB企服应用市场:ToB评测及商务社交产业平台 (https://dis.qidao123.com/) Powered by Discuz! X3.4