论坛
潜水/灌水快乐,沉淀知识,认识更多同行。
ToB圈子
加入IT圈,遇到更多同好之人。
朋友圈
看朋友圈动态,了解ToB世界。
ToB门户
了解全球最新的ToB事件
博客
Blog
排行榜
Ranklist
文库
业界最专业的IT文库,上传资料也可以赚钱
下载
分享
Share
导读
Guide
相册
Album
记录
Doing
搜索
本版
文章
帖子
ToB圈子
用户
免费入驻
产品入驻
解决方案入驻
公司入驻
案例入驻
登录
·
注册
只需一步,快速开始
账号登录
立即注册
找回密码
用户名
Email
自动登录
找回密码
密码
登录
立即注册
首页
找靠谱产品
找解决方案
找靠谱公司
找案例
找对的人
专家智库
悬赏任务
圈子
SAAS
ToB企服应用市场:ToB评测及商务社交产业平台
»
论坛
›
人工智能
›
人工智能
›
AI绘画专栏之Comfyui之AnimateDiffLCM更快效果更佳工作 ...
AI绘画专栏之Comfyui之AnimateDiffLCM更快效果更佳工作流分享 ...
水军大提督
金牌会员
|
2024-7-21 05:05:00
|
显示全部楼层
|
阅读模式
楼主
主题
650
|
帖子
650
|
积分
1950
AnimateLCM可以或许在很少的步骤中天生高质量的视频。相比直接在原始视频数据集上应用一致性学习,该项目提出了一种解耦的一致性学习策略,分别对图像天生的根本知识和运动天生的根本知识进行提炼。这种策略提高了练习服从并提升了天生视频的视觉质量。
那么关于两个LCM的工作流,和模子
AnimateDiff 模型和LCM工作流链接:https://pan.quark.cn/s/4c93c8b2511b
复制代码
AnimatediffLCM不仅仅是AnimateDiff与LCM的结合就完了,还对图像的质量,图像的一致性,和占用更低的显存做了优化,也就是说,两者兼得
示例
原理
视频扩散模子因其可以或许天生连贯且高保真度的视频而受到越来越多的关注。然而,迭代去噪过程使其盘算密集且耗时,从而限定了其应用。受一致性模子(CM)的开导,该模子提炼了预练习的图像扩散模子以以最小的步骤加快采样,并在条件图像天生上乐成扩展了潜在一致性模子(LCM),我们提出了AnimateLCM,答应在最小的步骤内天生高保真视频。我们没有直接在原始视频数据集上进行一致性学习,而是提出了一种解耦一致性学习策略,将图像天生先验和运动天生先验的蒸馏解耦,提高了练习服从,加强了天生视觉质量。别的,在稳定的扩散社区中实现即插即用适配器的组合,以实现各种功能~(例如,用于可控发电的ControlNet)。我们提出了一种有效的策略,使现有适配器顺应我们提炼的文本条件视频一致性模子,大概从头开始练习适配器,而不会影响采样速度。我们在图像条件视频天生和结构条件视频天生中验证了所提出的策略,都取得了最佳效果。
下载模子放置位置
1.它是支持animatediffv3的
2.纵然在 Windows 上的 256 GB rx 256 gpu 上以 256x8x600 的分辨率,当其他型号至少答应我以该分辨率创建时,这也会导致内存不足。但是LCM没有凌驾8GB
3.AnimateLCM,答应在最小的步骤内天生高保真视频。我们没有直接在原始视频数据集上进行一致性学习,而是提出了一种解耦一致性学习策略,将图像天生先验和运动天生先验的蒸馏解耦,提高了练习服从,加强了天生视觉质量。别的,在稳定的扩散社区中实现即插即用适配器的组合,以实现各种功能(例如,用于可控天生的 ControlNet)。我们提出了一种有效的策略,使现有适配器顺应我们提炼的文本条件视频一致性模子,大概从头开始练习适配器,而不会影响采样速度。我们在图像条件视频天生和结构条件视频天生中验证了所提出的策略,都取得了最佳效果。
模子存放
sd15_t2v_beta.ckpt
ComfyUI/models/animatediff_models
sd15_lora_beta.safetensors
ComfyUI/models/loras
工作流必须的节点
https://github.com/Kosinkadink/ComfyUI-AnimateDiff-Evolved
https://github.com/Kosinkadink/ComfyUI-VideoHelperSuite
https://github.com/jojkaart/ComfyUI-sampler-lcm-alternative
ADE_StandardUniformContextOptions
SamplerLCMCycle
ADE_LoadAnimateDiffModel
LoraLoader
BNK_CLIPTextEncodeAdvanced
ADE_UseEvolvedSampling
LCMScheduler
ADE_ApplyAnimateDiffModelSimple
VAEDecode
SamplerCustom
领取comfyui工作流合集、超多AI合集已整理到https://yv4kfv1n3j.feishu.cn/docx/MRyxdaqz8ow5RjxyL1ucrvOYnnH
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
本帖子中包含更多资源
您需要
登录
才可以下载或查看,没有账号?
立即注册
x
回复
使用道具
举报
0 个回复
正序浏览
返回列表
快速回复
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
or
立即注册
本版积分规则
发表回复
回帖并转播
发新帖
回复
水军大提督
金牌会员
这个人很懒什么都没写!
楼主热帖
MySQL高可用架构搭建实战
让软件飞——“X+”技术揭秘 ...
使用 OpenTelemetry 和 Loki 实现高效 ...
哈希算法-SHA-256-过程详解
DQL语句(一) -----简单select查询 ...
可观测性和传统监控的三大区别 ...
TP 判断IP是否在国内
camunda工作流实战项目(表单设计器+流 ...
SQL99相较于SQL92在多表查询时的新语法 ...
Docker(11)-- DockerFile详解
标签云
挺好的
服务器
快速回复
返回顶部
返回列表