划重点:

🔮 Consistent self-attention 实现角色连贯图像生成

🎥 Motion predictor 实现长视频生成

🎨支持漫画生成、保持图像转视频、角色长短视频等多种内容生成功能

CSS站长资源（ChinaZ.com）5月6日 消息:南开大学 HVision 团队开发了 StoryDiffusion，生成视频一款能够创造神奇故事的多图工具。StoryDiffusion可以保持角色一致，漫画生成多图漫画和长视频。和长

该工具通过实现 Consistent self-attention 和 Motion predictor，保持能够生成连贯的角色图像和视频。用户可以提供文本提示来生成角色连贯的生成视频图像序列，同时也能实现长视频生成，多图预测不同条件图像之间的漫画运动，实现更大幅度的和长运动预测。

StoryDiffusion 的保持应用范围广泛，可用于漫画生成、角色图像转视频等多种场景。生成视频通过 Consistent self-attention 机制生成的图像，可以顺利过渡为视频，实现两阶段长视频生成方法。此外，结合两个部分，还能生成常长且高质量的 AIGC 视频。

用户可以通过提供一系列用户输入的条件图像，使用 Image-to-Video 模型生成视频。此外，用户可以通过 Jupyter notebook 或本地 adio demo 来生成漫画。目前，该项目发布了生成漫画部分的源码。

产品入口：https://top.aibase.com/tool/storydiffusion

试玩入口：https://huggingface.co/spaces/YupengZhou/StoryDiffusion

(责任编辑：资讯)