AI绘画:利用Stable Diffusion ComfyUI进行换脸

打印 上一主题 下一主题

主题 999|帖子 999|积分 2997

  1.     在数字艺术和媒体编辑领域,换脸技术已经成为一种流行且强大的工具。它允许创作者将一个人物的面部特征无缝地转移到另一个人物上,创造出令人信服的视觉作品。Stable Diffusion ComfyUI提供了一个高效的平台,让用户能够轻松地实现换脸。本文将详细介绍如何使用ComfyUI中的IPAdapter FaceID插件进行换脸,从安装到实际操作,一步步引导你完成整个过程。
  2.   * 1
复制代码
换脸技术简介

  1.    换脸技术通过深度学习算法,识别并提取面部特征,然后将这些特征应用到目标图像上。在AI绘画中,保持角色一致性的方法之一就是通过换脸来实现。市面上有许多换脸插件,如Reactor、FaceFusion、Roop等,而IPAdapter推出的FaceID模型因其高效性和准确性而广受欢迎。
  2.   * 1
复制代码
安装IPAdapter FaceID插件

在利用IPAdapter FaceID之前,我们需要确保ComfyUI是最新版本,以便兼容最新的插件。

更新ComfyUI


  • 打开ComfyUI管理器。
  • 点击“更新全部”以更新ComfyUI到最新版本。
  • 假如你位于大陆境内,可能需要切换不同的网络情况(如不同的VPN节点)来成功更新。
安装IPAdapter FaceID Plus节点

有两种方法可以安装IPAdapter FaceID Plus节点:
方法一:通过管理器安装


  • 打开ComfyUI管理器。
  • 点击“安装节点”。
  • 搜索“ComfyUI_IPAdapter_plus”并点击安装。


方法二:手动安装


  • 访问IPAdapter FaceID Plus的GitHub主页:GitHub - cubiq/ComfyUI_IPAdapter_plus。
  • 下载ZIP压缩包。
  • 将下载的ZIP压缩包解压到ComfyUI目次下的custom_nodes目次中。
  • 假如需要,可以删除文件夹名后的“-main”。


准备工作

在开始换脸之前,确保你已经安装了所有必要的模子和依靠项。
安装模子


  • 下载IPAdapter模子和CLIP_VISION模子。
  • 将模子文件存放在ComfyUI的models目次下。
模子文件的huggingface下载地址:文末领取!
ipadapter总共有4个版本的模子,每个模子都包罗1个主模子和1个lora模子,建议将这4个版本的模子都下载下来,分别放入相对应的文件夹中:
主模子文件夹:“\ComfyUI_windows_portable\ComfyUI\models\ipadapter”
lora模子文件夹:“\ComfyUI_windows_portable\ComfyUI\models\loras\ipadapter”



点击“管理器”,选择“安装模子”,搜索关键词“clip”,将4个“clip_vision”模子都安装好,此中2个是1.5版的模子,2个是SDXL版的模子,固然截至到本文发布的时间ipadapter尚未推出faceID的SDXL版模子,但是信赖不就之后就会推出SDXL版!


安装InsightFace


  • 查抄Python版本是否兼容。
  • 下载相应的.whl文件。
  • 安装InsightFace库。
insightface是一个Python库,不管是运行reactor插件照旧其他的换脸插件,都会用到这个Python库,由于ComfyUI是一个独立的虚拟情况,所以安装insightface库的方法有点特别
首先我们要查看下我们的comfyUI的虚拟情况中的Python版本
第一步:找到根目次下的“python_embeded”文件夹,进入到该文件夹中;
第二步:在该文件夹的路径栏输入“cmd”;
第三步:在弹出的cmd命令窗口中输入“python.exe -V”命令,此时我们就可以查看到我们ComfyUI中的Python版本,我的是“Python
3.11.6”版;
我们在上面一步已经查看了我们自己的Python版本,接下来根据自己的Python版本下载相对应的whl文件:
3.10版:insightface-0.7.3-cp310-cp310-win_amd64.whl
3.11版:insightface-0.7.3-cp311-cp311-win_amd64.whl
将下载下来的whl文件放在“\ComfyUI_windows_portable\python_embeded”文件下面

  1. python -m pip install -U pip
  2. python.exe -m pip install insightface-0.7.3-cp311-cp311-win_amd64.whl
  3.   * 1
  4.   * 2
复制代码

创建换脸工作流

如今,终于。当我们顺遂完成了上面的所有安装之后,我们已经准备好开始创建换脸工作流。利用“ComfyUI_IPAdapter_plus”节点来进行换脸!比起reactor等换脸插件,“ComfyUI_IPAdapter_plus”的换脸行为发生在图片生成之前,所以最后的效果会更加自然!下面是一个换脸操纵的案例:
基础设置


  • 打开ComfyUI并创建一个新的工作流。
  • 添加必要的节点,包罗“FaceID工作流”节点。
工作流留意事项



  • 确保所有节点正确连接。
  • 根据需要调解节点参数。
  • 查抄模子版本是否与插件兼容。
开始换脸


  • 导入源图像和目标图像。
  • 调解FaceID工作流中的参数,如换脸强度、面部特性匹配等。
  • 运行工作流并查看换脸效果。

工作流留意事项说明:

  • ipadapter模子和lora模子一定要匹配;
  • 可以根据自己的需要调解lora的权重,数字越大上传的参考图片对生成的图片影响越大,包罗画质和构图,适当低落该权重,可以让AI发挥的空间越大,画面越自然,但是换脸效果可能会低落;
  • ipadapter模子中的plus版和plusV2版本在换脸效果上并不比基础版要好,但是在画质上会相对较好;
  • 工作流的最反面的组是高清放大和面部修复,该组我已经默认设置为“停用”模式,假如你有需要可以右键“启用该组节点”;
  • 高清放大节点中的“降噪”参数设置得越小,高清放大之后的图片人物面部就越靠近原图,过大的“降噪”参数会让高清放大之后的人物改变人脸的样式,该参数建议设置在0.05以下!
结语

通过上述步骤,你如今应该可以或许利用Stable Diffusion ComfyUI和IPAdapter
FaceID插件轻松地进行换脸操纵。记住,实践是把握任何技术的最佳方式,所以不断实验和调解参数,直到你达到满意的效果。假如你在过程中碰到任何题目,可在相关社区寻求帮助。

请留意,本文中提到的链接和资源可能需要在实际情况中进行验证和调解。此外,换脸技术涉及隐私和伦理题目,利用时应确保服从相关法律法规,并尊重个人隐私权。
针对各位AIGC初学者,这里列举了一条完备的学习操持,感爱好的可以阅读看看,盼望对你的学习之路有所帮助,废话不多说,进入正题:

目标应该是这样的:
第一阶段(30天):AI-GPT从入门到深度应用

该阶段首先通过先容AI-GPT从入门到深度应用目次结构让大家对GPT有一个简单的认识,同时知道为什么要学习GPT利用方法。然后我们会正式学习GPT深度玩法应用场景。
-----------


  • GPT的定义与概述
  • GPT与其他AI对比区别
  • GPT超强影象力体验
  • 万能GPT如何帮你解决齐备题目?
  • GPT表达方式优化
  • GPT多类复杂应用场景解读
  • 3步刨根问底获取终极方案
  • 4步进步技巧-GPT高情商沟通
  • GPT深度玩法应用场景
  • GPT高级角色扮演-教学老师
  • GPT高级角色扮演-育儿专家
  • GPT高级角色扮演-职业顾问
  • GPT高级角色扮演-专业私家健身教练
  • GPT高级角色扮演-生理健康顾问
  • GPT高级角色扮演-步调UX/UI界面开发顾问
  • GPT高级角色扮演-产物司理
  • GPT高级技巧-游戏IP角色扮演
  • GPT高级技巧-文本冒险游戏引导
  • GPT实练习习-销售行业
  • GPT实练习习-菜谱保举
  • GPT实练习习-美容护肤
  • GPT实练习习-知识问答
  • GPT实练习习-语言学习
  • GPT实练习习-科学减脂
  • GPT实练习习-情感咨询
  • GPT实练习习-私家医生
  • GPT实练习习-语言翻译
  • GPT实练习习-作业辅导
  • GPT实练习习-谈天伴随
  • GPT实练习习-育儿建议
  • GPT实练习习-资产配置
  • GPT实练习习-教学课程编排
  • GPT实练习习-活动策划
  • GPT实练习习-法律顾问
  • GPT实练习习-旅游指南
  • GPT实练习习-编辑脚本
  • GPT实练习习-口试雇用
  • GPT实练习习-宠物照顾护士和练习
  • GPT实练习习-吸睛爆款标题生成
  • GPT实练习习-自媒体爆款软件拆解
  • GPT实练习习-自媒体文章创作
  • GPT实练习习-高效写作推广方案
  • GPT实练习习-星座分析
  • GPT实练习习-原创音乐创作
  • GPT实练习习-起名/解梦/写诗/写情书/写小说
  • GPT提升工作效率-Word关键字词提取
  • GPT提升工作效率-Word翻译实现
  • GPT提升工作效率-Word自动填写、排版
  • GPT提升工作效率-Word自动纠错、建议
  • GPT提升工作效率-Word批量生产优质文章
  • GPT提升工作效率-Excel自动化实现数据计算、分析
  • GPT提升工作效率-Excel快速生成、拆分及合并实战
  • GPT提升工作效率-Excel生成复杂任务实战
  • GPT提升工作效率-Excel用Chat Excel让效率腾飞
  • GPT提升工作效率–PPT文档内容读取实现
  • GPT提升工作效率–PPT快速批量调解PPT文档
  • GPT提升工作效率-文件批量创建、复制、移动等高效操纵
  • GPT提升工作效率-文件遍历、搜索等高效操纵
  • GPT提升工作效率-邮件自动发送
  • GPT提升工作效率-邮件自动复兴
  • GPT接入QQ与QQ群实战
  • GPT接入微信与微信群实战
  • GPT接入QQ与VX多用户访问实战
  • GPT接入工具与脚本摆设实战
第二阶段(30天):AI-绘画进阶实战

该阶段我们正式进入AI-绘画进阶实战学习,首先通过了解AI绘画定义与概述 ,AI绘画的应用范畴 ,PAI绘画与传统绘画的区别 ,AI绘画的工具分类先容的基本概念,以及AI绘画工具Midjourney、Stable Diffusion的利用方法,尚有AI绘画插件和模板的利用为我们接下来的实战计划学习做铺垫。


  • -----------
    AI绘画定义与概述
  • AI绘画的应用范畴
  • AI绘画与传统绘画的区别
  • AI绘画的工具分类先容
  • AI绘画工具-Midjourney
  • AI绘画工具-百度文心一格
  • AI绘画工具-SDWebUI
  • AI绘画工具-Vega AI
  • AI绘画工具-微信中的AI绘画小步调
  • Midjourney学习-Discord账号的注册
  • Midjourney Bot界面讲授
  • Midjourney提示词入门
  • Midjourney高级提示词
  • Midjourney版本参数学解读
  • Midjourney功能参数
  • Midjourney上采样参数
  • AI绘画组合应用1-Midjourney + GPT
  • AI绘画组合应用2-Stable Diffusion + GPT
  • AI绘画组合应用3-AI绘画+ GPT +小红书
  • AI绘画组合应用4-AI绘画+ GPT +抖音
  • AI绘画组合应用5-AI绘画+ GPT +公众号
  • AI绘画组合应用6-AI绘画+ GPT + AI视频
  • AI绘画组合应用7-AI绘画+ GPT + 小说人物/场景
  • AI绘画计划-Logo计划
  • AI绘画计划-套用万能公式
  • AI绘画计划-引用艺术风格
  • AI绘画计划-GPT加快计划方案落地
  • AI绘画计划-Vega AI渲染线稿生成计划
  • AI绘画计划-摄影
  • AI绘画计划-头像计划
  • AI绘画计划-海报计划
  • AI绘画计划-模特换装
  • AI绘画计划-家具计划
  • AI绘画计划-潘顿椅计划
  • AI绘画计划-沙发计划
  • AI绘画计划-电视柜计划
  • AI绘画计划-包装计划的提示词构思
第三阶段(30天):AI-视频高段位

恭喜你,假如学到这里,你基本可以找到一份AIGC副业相关的工作,比如电商运营、原画计划、美工、安全分析等岗位;假如新媒体运营学的好,还可以从各大自媒体平台收获平台兼职收益。
到此为止,大概2个月的时间。你已经成为了一名“AI小子”。那么你还想往下探索吗?


  • -----------
    AI视频定义与概述
  • AI视频制作-方案与创新
  • AI视频制作-各种工具实操
  • AI视频制作-美学风格(油画/插画/日漫/水墨)
  • AI视频制作-形象设定(人物形象服装/造型/表情)
  • AI视频画面特效处理
  • AI视频画面拼接
  • AI视频画面配音
  • AI视频画面包装
  • AI视频锁定人物逐一精修
  • 多种表情动作/情节
  • 动态模子转换-视频内部元素关键帧
  • 动态模子转换-图像整体活动
  • 动态模子转换-虚拟人
  • 动态模子转换-外貌特效
  • AI自媒体视频-深问GPT,获取方案
  • AI自媒体视频-风格设置(诗歌/文言文等)
  • AI自媒体视频-各行业创意视频计划思路
  • AI视频风格转换
  • AI视频字数压缩
  • AI视频同范例衍生
  • AI视频Pormpt公式
第四阶段(20天):AI-虚拟数字人课程



  • -----------
    AI数字人工具简介
  • AI工作台界面功能展示及先容
  • AI数字人任务确定
  • AI数字人素材准备
  • AI知识、语料的投喂
  • AI模子练习
  • AI练习成果展示及改进
  • AI数字人直播体系工具利用
  • AI人物在各平台直播
  • AI数字人在OBS平台直播
第五阶段(45天以上):AIGC-多渠道变现课程

该阶段是项目演练阶段,大家通过利用之前学习过的AIGC基础知识,项目中分别应用到了新媒体、电子商务等岗位能帮助大家在主流的新媒体和电商平台引流和带货变现。
-----------


  • AI-小红书引流变现
  • AI-公众号引流变现
  • AI-知乎引流变现
  • AI-抖音引流/带货变现
  • AI-写作变现
  • AI-B站引流变现
  • AI-快手引流变现
  • AI-百家号引流变现
  • AI-制作素材模板出售变现
  • AI-周边定制变现
  • AI-手机壳图案定制变现
  • AI-周边产物定制变现
  • AI-服装图案定制变现
  • AI-个性头像定制变现
  • AI-起号与知识付费变现
  • AI-实现淘宝销售变现
学习是一个过程,只要学习就会有挑衅。天道酬勤,你越努力,就会成为越优秀的自己。
假如你能在15天内完成所有的任务,那你堪称天才。然而,假如你能完成 60-70% 的内容,你就已经开始具备成为一名AIGC的正确特性了。
这份完备版的AIGC资料我已经打包好,需要的点击下方二维码,即可前往免费领取!



免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
回复

使用道具 举报

0 个回复

倒序浏览

快速回复

您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

三尺非寒

金牌会员
这个人很懒什么都没写!
快速回复 返回顶部 返回列表