支持Animatediff所有控制方式!AnimateLCM 4步推理即可生成视频
时间:2024-07-02 03:57:57 来源:带水拖泥网 作者:自媒体 阅读:287次
CSS站长资源(ChinaZ.com)2月2日 消息:又有团队开卷视频生成了!这个项目在视频生成方面非常优秀。支持制方它使用了一致性模型(Consistency Model,所式A生成视频 CM)的有控启发,简化了预训练的推理图像扩散模型以加速采样过程。这一模型还成功扩展到了潜在一致性模型(Latent Consistency Model,支持制方 LCM),所式A生成视频用于条件图像生成,有控最终形成了AnimateLCM。推理
项目地址:https://top.aibase.com/tool/animatelcm
AnimateLCM能够在很少的支持制方步骤中生成高质量的视频。相比直接在原始视频数据集上应用一致性学习,所式A生成视频该项目提出了一种解耦的有控一致性学习策略,分别对图像生成的推理基础知识和运动生成的基础知识进行提炼。这种策略提高了训练效率并提升了生成视频的支持制方视觉质量。
此外,所式A生成视频为了结合稳定扩散社区中的有控即插即用适配器来实现各种功能,比如使用ControlNet进行可控制的视频生成,该项目提出了一种高效的策略。这个策略不仅可以将现有的适配器调整到文本条件视频一致性模型中,还可以从零开始训练适配器,而不会影响采样速度。
在基于图像的视频生成和基于布局的视频生成中,AnimateLCM都取得了优异的成绩。从演示来看视频效果也很不错,支持现有 SD 生态 Animatediff 的所有控制方式,将LCM用在视频生成只需要4步推理就可以生成视频。目前,AnimateLCM暂未发布代码和权重,期待能够尽快上代码。
(责任编辑:知识)
最新内容
- ·坐实国产!苹果Vision Pro产地公布:原汁原味的中国制造
- ·小鹏汽车财报公布:单季营收超130亿 新品牌预告即将登场
- ·NextStarterAI官网体验入口 一站式开发工具套件免费使用地址
- ·把抖音当成朋友圈,她一条视频涨粉100W+
- ·大哥凌晨遇消防员吃饭霸气买单:就这么豪横
- ·有钱也不一定买到!英伟达GPU今年发货 成本和能耗较前代改善25倍
- ·Stable Video 3D官网体验入口 AI 3D生成工具使用方法教程说明
- ·信心十足!马斯克:特斯拉FSD全自动驾驶下月将“大放异彩”
- ·问界1月交付32973辆 首夺新势力月销冠军
- ·真贴地飞行!马斯克:下一代特斯拉Roadster用上火箭技术
热点内容