【AI绘画】ComfyUI 完全入门:图生视频
大家好,我是天天分享AI应用的彤姐!ComfyUI 是一个基于 Stable Diffusion 的AI绘画创作工具,近来发展势头特别迅猛,但是 ComfyUI 的上手门槛有点高,用户须要对 Stable Diffusion 以及各种数字技术的原理有一定的了解才行。这个系列将会介绍 ComfyUI 的一些根本概念和使用方法,让大家更快的掌握 ComfyUI 的使用本领,创作出自己独特的艺术作品。
本文继续分享 ComfyUI 的使用方法:图生视频,也就是根据图片生成视频,使用的模子是SVD。
我之前的很多萌宠图片就是用它生成的,阅读量还不错:
https://i-blog.csdnimg.cn/direct/f34707b68a044f85aa1c52fbc8f389e2.png
SVD介绍
SVD是由 Stable Diffusion 的创作者 Stability AI 公司开源发布的。
SVD的全称是 Stable Video Diffusion,也就是稳固视频扩散的意思,现在最新版本是1.1。这个模子以静止图像作为条件帧,并从中生成视频,现在还不支持使用提示词引导。默认参数下生成的结果是分辨率为1024x576的25帧视频,不外ComfyUI中实测也可以生成多种分辨率和更长时长的视频。
SVD既可用于非贸易用途,也可用于贸易用途。你可以在许可下使用此模子进行非贸易或研究用途,不外大家也要注意遵守相关法律和规定,并确保不侵占他人的知识产权,详细使用许可协议可以看这里:https://huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt-1-1
安装ComfyUI
当地或手动安装
本系列的第一篇文章中已经详细的介绍过安装步骤,须要的同砚请点此前去:【AI绘画】ComfyUI零根本入门:安装部署
使用SVD
下载SVD模子
官方模子下载地点:https://huggingface.co/stabilityai/stable-video-diffusion-img2vid-xt-1-1
须要下载的文件名称:svd_xt_1_1.safetensors
如果你访问 huggingface 不方便,也可以给公众号“萤火遛AI”发消息:SVD,即可获取下载地点。
下载后放到这个目次下:ComfyUI/models/checkpoints
使用SVD工作流
SVD的工作流比较简单,大家只要在“加载”中加载这个工作流就行了,不须要特别安装插件,工作流领取方式见文末。
我这里再做一个简单的标注,让大家了解此中的原理,并配置记得参数。
https://i-blog.csdnimg.cn/direct/a995e8d9a7cd4fa7b297f7eb040e5270.png
1、加载SVD模子,下载上一步介绍的模子到指定的位置,就可以在这里选择到。部署模子后请注意革新页面,让节点尽快发现到模子。
2、上传图片,这里没什么限定,上传自己喜欢的就行了。SVD对风景大概移动物体图片的视频生成结果比较好,人物图片生成视频时须要控制动作幅度,否则轻易瓦解。
3、设置帧数,这个参数影响视频的时长,默认值是25。由于默认的帧率是6,2秒就是12,4秒24。
4、设置帧率,帧率就是每秒的画面数,帧率越高视频越连贯,发起先从默认的6开始,徐徐上调,看结果可否满足。
5、动态bucketID,这个参数控制视频中主体的动作幅度,值越小动作变化越小,以人或动物为主体时一定要设置为较小的值,否则轻易瓦解。
其它就是一些通用操作了,刚接触 ComfyUI 大概不太明白的同砚可以看我这篇文章:https://www.yuque.com/yvw351p9nn
生成视频
最后点击“添加提示词队列”,静待视频生结果好了,生成须要的时间取决于你的机器性能、视频的分辨率和帧数。
https://i-blog.csdnimg.cn/direct/8643594605cc43a8afeac4d34f972d95.png
写在最后
感兴趣的小伙伴,赠送全套AIGC学习资料,包罗AI绘画、AI人工智能等前沿科技教程和软件工具,详细看这里。
https://i-blog.csdnimg.cn/direct/4fc9bf35fdb64c969933ac071982dda6.jpeg
AIGC技术的未来发展前景广阔,随着人工智能技术的不停发展,AIGC技术也将不停提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算体系具有更高效、更智能、更机动的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对步调员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。
https://img-blog.csdnimg.cn/direct/e6a8b48b8024497daecb9d6652c72bb7.png#pic_center
一、AIGC所有方向的学习门路
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,包管自己学得较为全面。
https://img-blog.csdnimg.cn/direct/af6e2f485a4f485d9b76a93afa81a02f.png
https://img-blog.csdnimg.cn/direct/7d91365d8b3a45aba258f4603c71dc5c.png#pic_center
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
https://img-blog.csdnimg.cn/direct/01a2ea000b474fef83abfd18888b2e38.png
三、最新AIGC学习条记
当我学到一定根本,有自己的明白能力的时间,会去阅读一些前辈整理的书籍大概手写的条记资料,这些条记详细纪录了他们对一些技术点的明白,这些明白是比较独到,可以学到不一样的思绪。
https://img-blog.csdnimg.cn/direct/9e597a6fae9344cea8f4a9caf30ecc55.png
https://img-blog.csdnimg.cn/direct/f2619de95125425d8a19b85ce2ff1894.png
四、AIGC视频教程合集
观看全面零根本学习视频,看视频学习是最快捷也是最有结果的方式,跟着视频中老师的思绪,从根本到深入,还是很轻易入门的。
https://img-blog.csdnimg.cn/direct/ce803d0289b84736b059293d696429b6.png
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时间可以搞点实战案例来学习。
https://img-blog.csdnimg.cn/direct/373dd1f17ed14db1a2fa4dfec03c0559.png
https://i-blog.csdnimg.cn/direct/b34955a90e234a90afec27962ce9e2c2.jpeg
如有侵权,请接洽删除
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
页:
[1]