农民 发表于 2024-9-7 01:08:56

Stable Diffusion:AI写真看过来,使用InstantID插件实现AI写真

最近收到不少网友关于AI写真方面的留言,希望能写一些关于AI写真方面的文章。个人关注AI写真有一段时间了,网上也看到了不少写的文章教程和案例,作为一个AI绘画的狂热爱好者,自然也少不了去操作实践一下,关于AI写真,后面我会作为专题来写一系列的文章,把本身在实际操作过程中的点点滴滴记录下来,希望能对各人有所帮助。
所谓AI写真,简朴来说,就是使用AI工具天生人物的写真照片,这里我们主要使用的AI工具是Stable Diffusion。AI实现艺术写真有很多种玩法,本日我们先容AI进行艺术写真最简朴的一种实现方式:插件换脸法。
插件换脸法是借助插件工具去识别人物五官特性,特殊是人脸特性,然后天生一张新的照片,新的照片和原图片的人脸尽可能保持同等。
这里用到的插件就是InstantID。必要插件的小伙伴,扫描下方二维码获取!
https://i-blog.csdnimg.cn/direct/80501a3c956348719f5b0fd96ae8c6a4.jpeg#pic_center
一. InstantID实现插件换脸的制作方法
【第一步】:大模型的选择
InstantID插件支持的大模型是SDXL的大模型,所以大模型各人不要选择基于SD 1.5训练的大模型。这里我们使用LEOSAM HelloWorld|SDXL真实感大模型,最新的版本是V5.0。
https://img-blog.csdnimg.cn/img_convert/89ece33093a6f642c81dc3e2d3642ac4.png
这里我们的VAE模型选择"None"。
【第二步】:提示词的编写
正向提示词:
   Prompt:high quality,masterpiece,rich details,realistic photography,8k,high-definition image quality,
1 girl,solo,brown eyes,brown hair,long hair,dress,earrings,white dress,fields,flowers,fields of flowers,looking at the audience,
outdoors,pink flowers,
    提示词:高品格,杰作,细节丰富,摄影传神,8k,高清画质,
一个女孩,独唱,棕色眼睛,棕色头发,长发,衣服,耳环,白色连衣裙,
田野,鲜花,鲜花的田野,看着观众,户外,粉色的花朵,
反向提示词:
   easynegative,ng_deepnegative_v1_75t,(worst quality:2),(low quality:2),(normal quality:2),lowres,bad anatomy,bad hands,normal quality,((monochrome)),((grayscale)),((watermark)),
文生图相干参数设置


[*] 采样器:DPM++2M Karras
[*] 采样迭代步数:30
[*] 图片宽高:发起设置为1024左右。
[*] 提示词引导系数(CFG):3-5之间
https://img-blog.csdnimg.cn/img_convert/755d21a46c9b1e9016aa58190a8e0539.jpeg
【第三步】ControlNet插件InstantID模型设置
这里必要使用2个ControlNet单元。
ControlNet单元0:上传写真人物的原图
这里我们使用神仙姐姐的照片天生AI艺术写真照片。
注意这里的图片最好也是1024左右的大小。
https://img-blog.csdnimg.cn/img_convert/442f16ed9e7aeceead70dd9f849e92b8.png
相干参数设置如下:


[*] 控制类型:选择"Instant_ID"
[*] 预处置惩罚器:instant_id_face_embedding
[*] 模型:ip-adpter_instanid_sdxl
[*] 控制权重:1
ControlNet单元1:上传人脸定位照
上传任意一张照片,它的作用是控制最终出图的人物脸部位置。我们可以和第一张图片一样。
https://img-blog.csdnimg.cn/img_convert/2ee6106616a014248d4f27125c7997f2.png
相干参数设置如下:


[*] 控制类型:选择"Instant_ID"
[*] 预处置惩罚器:instant_id_face_keypoints
[*] 模型:control_instant_id_sdxl
[*] 控制权重:0.5左右(0.45-0.5)
【第四步】图片的天生
点击【天生】按钮,我们来看一下最终天生的图片结果。
https://img-blog.csdnimg.cn/img_convert/6f266621a150ce006c573d79050c771b.png
https://img-blog.csdnimg.cn/img_convert/31d4edd85712623ae2f396bed5d2e01f.png
二. 改变人物服装背景
我们可以通过修改正向提示词更换图片中人物服装,背景等元素。
提示词1:圣诞写真
   **Prompt:**high quality,masterpiece,rich details,realistic photography,8k,high-definition image quality,
    1 girl,solo,exquisite hairstyle,brown hair,long hair,Christmas clothing,Christmas dress,bow,Christmas hat,Christmas,festive atmosphere,indoor,upper body,christmas lights,tree,gift box,roses,ribbons,Christmas decorations,lighting,fireplace,warm,
    **提示词:**高品格,杰作,细节丰富,摄影传神,8k,高清画质,
1个女孩,独唱,精致的发型,棕色头发,长发,圣诞服装,圣诞礼服,蝴蝶结,圣诞帽,圣诞,喜庆氛围,室内、上半身、圣诞彩灯、圣诞树、礼盒、玫瑰、彩带、圣诞装饰品、灯饰、壁炉、暖炉、
https://img-blog.csdnimg.cn/img_convert/c3d585f30c4d7b527fbca744500c8aa0.png
https://img-blog.csdnimg.cn/img_convert/6cb1e1516fef7d946597d51673c0ee83.png
提示词2:婚纱
   **Prompt:**high quality,masterpiece,rich details,realistic photography,8k,high-definition image quality,
1 girl,solo,exquisite hairstyle,crown,headscarf,hair bun,
White wedding dress,long dress,jewelry,looking at the audience,
**提示词:**高品格,杰作,细节丰富,摄影传神,8k,高清画质,
1个女孩,独唱,精致的发型,皇冠,头巾,发髻,
白色婚纱,长裙,珠宝,看着观众,
https://img-blog.csdnimg.cn/img_convert/3c4ec7b25f1bf755f8847e65f624ee64.png
https://img-blog.csdnimg.cn/img_convert/fbdf8e9dacc921ff85362cf176597399.png
三. 改变人物动作姿势
我们可以通过ControlNet的单元1变动人物的动作姿势。只必要替换掉ControlNet的单元1的上传的人物图片即可。
https://img-blog.csdnimg.cn/img_convert/2c8681a4687bfc76f17007c776012674.png
天生的图片结果如下。
https://img-blog.csdnimg.cn/img_convert/19f25bb14d3e1eea4eedf38a78582bf1.png
https://img-blog.csdnimg.cn/img_convert/288981dd3050fb00cff37593a467f87f.png
https://img-blog.csdnimg.cn/img_convert/88b6d4e91b657486de88ca531703cee9.png
https://img-blog.csdnimg.cn/img_convert/a822f8222c1160ff0b90d2c2af9bcc06.png
四. 总结
插件换脸法实现AI艺术写真,优点是操作起来非常简朴,人脸结果的保持同等还是比较精彩的。但是也存在有些不足之处。
(1)InstantID插件只使用于SDXL大模型,限制了很多LORA模型的使用,由于很多LORA模型是基于SD 1.5底子模型训练的。
(2)天生的图片整体缺乏真实感,尤其是色调渲染感觉不是很到位,这个临时不清楚是大模型的原因还是插件本身的原因。各人假如有更好的大模型或者参数设置可以留言交流沟通一起讨论学习哦。
好了,本日的分享就到这里了,希望本日禀享的内容对各人有所帮助。
写在最后

AIGC技能的将来发展前景广阔,随着人工智能技能的不断发展,AIGC技能也将不断提高。将来,AIGC技能将在游戏和盘算领域得到更广泛的应用,使游戏和盘算系统具有更高效、更智能、更机动的特性。同时,AIGC技能也将与人工智能技能紧密结合,在更多的领域得到广泛应用,对步伐员来说影响至关紧张。将来,AIGC技能将继续得到提高,同时也将与人工智能技能紧密结合,在更多的领域得到广泛应用。
感兴趣的小伙伴,赠予全套AIGC学习资料和安装工具,包含AI绘画、AI人工智能等前沿科技教程,模型插件,具体看下方。

https://img-blog.csdnimg.cn/img_convert/847c639d3a7318706e38da4a6833e901.jpeg
一、AIGC所有方向的学习门路
AIGC所有方向的技能点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,包管本身学得较为全面。
https://img-blog.csdnimg.cn/direct/af6e2f485a4f485d9b76a93afa81a02f.png
https://img-blog.csdnimg.cn/direct/7d91365d8b3a45aba258f4603c71dc5c.png#pic_center
二、AIGC必备工具
工具都帮各人整理好了,安装就可直接上手!
https://img-blog.csdnimg.cn/direct/01a2ea000b474fef83abfd18888b2e38.png
三、最新AIGC学习条记
当我学到肯定底子,有本身的明白能力的时间,会去阅读一些先辈整理的册本或者手写的条记资料,这些条记详细记录了他们对一些技能点的明白,这些明白是比较独到,可以学到不一样的思绪。
https://img-blog.csdnimg.cn/direct/9e597a6fae9344cea8f4a9caf30ecc55.png
https://img-blog.csdnimg.cn/direct/f2619de95125425d8a19b85ce2ff1894.png
四、AIGC视频教程合集
观看全面零底子学习视频,看视频学习是最快捷也是最有结果的方式,跟着视频中老师的思绪,从底子到深入,还是很容易入门的。
https://img-blog.csdnimg.cn/direct/ce803d0289b84736b059293d696429b6.png
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将本身的所学运用到实际当中去,这时间可以搞点实战案例来学习。
https://img-blog.csdnimg.cn/direct/373dd1f17ed14db1a2fa4dfec03c0559.png
https://img-blog.csdnimg.cn/img_convert/847c639d3a7318706e38da4a6833e901.jpeg 若有侵权,请联系删除
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
页: [1]
查看完整版本: Stable Diffusion:AI写真看过来,使用InstantID插件实现AI写真