Stable Diffusion【应用篇】【手部修复】:SD手部问题修复大揭秘 ...

打印 上一主题 下一主题

主题 1518|帖子 1518|积分 4554


在AI绘画中,手部问题一直是一个麻烦的问题。双手变形、手指缺失、手指多余这些问题常常狐疑着我们。本文主要讨论一下关于Stable Diffusion中有哪些方法可以用于修复手部问题。
一. 素材准备
在文生图的功能界面天生一张有手部问题的图片。


  • 大模子:majicMIX realistic 麦橘写实_v7
  • 正向提示词
   Prompt:a super beautiful chinese girl showing two hands,Open palms in a welcome sign,smiling,wearing pink dress,standing in the street,front view,upper body
  提示词:一个超等漂亮的中国女孩伸出双手,伸开手掌做欢迎的手势,微笑着,穿着粉红色的衣服,站在街上,正面,上身,
  

  • 采样器:DPM++ 2M Karras
  • 采样迭代步数:25
  • 图片宽高:512*768
  • CFG: 7
随机抽取一张手指有问题的图片

上面天生的图片2只手都有问题,背面都以这张图片的手部修复为例阐明。
二. 方法1:使用图生图局部重绘修复手部问题
【第一步】:图生图局部重绘设置
在图生图局部重绘功能菜单界面,上传待手部修复的照片。

由于2只手都有问题,为了获取最好的修复效果,最好分两步修复,先修复左手,再修复右手。我们先使用上图右边的画笔,将左边手部区域涂白。
下面是图生图局部重绘干系参数设置



  • 蒙版模式:重绘蒙版内容,专门针对手部问题进行重绘。
  • 蒙版区域内容处理惩罚:原版
  • 重绘区域:整张图片
  • 采样器:DPM++ 2M Karras
  • 采样迭代步数:25
  • 图片宽高:512*768
  • CFG: 7
  • 重绘强度:0.7
【第二步】:大模子和正向提示词
大模子:majicMIX realistic 麦橘写实_v7
正向提示词:和天生图片的正向提示词生存同等。
【第三步】 图片的天生
由于天生的图片具有随机性,大概天生的图片不会立马满意我们的要求,建议多次天生,直到抽取到我们满意的一张图片为止。

【第四步】 重复上面的步骤,修复右手

干系阐明:
(1)这种方式修复的手部存在随机概率,大概需要反复抽签才能抽取到满意的一张。
(2)修复的手部是否好看,这个和模子的渲染能力有关系。
二. 方法二:使用ControlNet的DWPose修复手部问题
【第一步】:图生图局部重绘设置
在图生图局部重绘功能菜单界面,上传待手部修复的照片。

我们将有问题的2只手使用画笔都涂白。
大模子、提示词、干系参数的设置和方法1中一样,这里就不赘余。
【第二步】:ControlNet Openpose模子设置

干系参数设置如下:


  • 控制类型:选择"OpenPose(姿态)"
  • 预处理惩罚器:dw_openpose_full
  • 模子: control_v11p_sd15_openpose
关于dw_openpose_full识别手部的预览图,可见监测出人的脸,手部,姿势等都非常全面。

关于dw_openpose_full的先容,可以参照之前的文章,里面有非常详细的讲解。【Stable Diffusion【进阶篇】:手部修复的实现方式(3)】
【第三步】:图片的天生

干系阐明:
(1)这种方式修复的手部操作容易,可控性很强,而且目前的DWPose控制器好像可以主动识别出有问题的手部,将天生的预览图手部展示正常,无需我们再次编辑处理惩罚。
(2)天生的手指的长度和接头处仍然大概存在不正确性。
三. 方法三:使用ControlNet的HandRefiner修复手部问题
【第一步】:图生图局部重绘设置
在图生图局部重绘功能菜单界面,上传待手部修复的照片。

我们将有问题的2只手使用画笔都涂白。
大模子、提示词、干系参数的设置和方法1中一样,这里就不赘余。
【第二步】:ControlNet HandRefiner模子设置

干系参数设置如下:


  • 控制类型:选择"Depth(深度)"
  • 预处理惩罚器:depth_hand_refiner
  • 模子:control_sd15_inpaint_depth_hand_fp16
关于使用depth_hand_refiner获取手部预览图效果如下。

【第三步】:图片的天生

好了,本日的分享就到这里了,盼望本日分享的内容对大家有所帮助。
如有侵权,请联系删除。
写在最后

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,详细看这里。


AIGC技能的未来发展远景广阔,随着人工智能技能的不断发展,AIGC技能也将不断提高。未来,AIGC技能将在游戏和盘算领域得到更广泛的应用,使游戏和盘算系统具有更高效、更智能、更灵活的特性。同时,AIGC技能也将与人工智能技能精密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技能将继承得到提高,同时也将与人工智能技能精密结合,在更多的领域得到广泛应用。


一、AIGC全部方向的学习门路
AIGC全部方向的技能点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。


二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!

三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时间,会去阅读一些先辈整理的书籍大概手写的笔记资料,这些笔记详细记载了他们对一些技能点的理解,这些理解是比较独到,可以学到不一样的思绪。


四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思绪,从基础到深入,还是很容易入门的。

五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到现实当中去,这时间可以搞点实战案例来学习。


若有侵权,请联系删除!

免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x
回复

使用道具 举报

0 个回复

倒序浏览

快速回复

您需要登录后才可以回帖 登录 or 立即注册

本版积分规则

张国伟

论坛元老
这个人很懒什么都没写!
快速回复 返回顶部 返回列表