在Stable Diffusion中生成视频,你需要安装一些特定的插件和模型。以下是详细的步骤和所需内容:
插件安装
Temporal Kit:

功能:用于制作视频的扩展插件,支持视频风格迁移和时间一致性。

安装方法:

打开Stable Diffusion Web UI,点击“扩展”。

选择“从网址安装”,粘贴以下网址:Temporal Kit GitHub。

点击“安装”并重启Web UI。

AnimateDiff:

功能:制作丝滑动画视频插件,支持图生动画和视频重绘动画。

安装方法:

打开Stable Diffusion Web UI,点击“扩展”。

选择“从网址安装”,粘贴以下网址:AnimateDiff GitHub。

点击“安装”并重启Web UI。

模型下载:

动画模型:下载“mm_sd_v15_v2.ckpt”并放置在…\extensions\sd-webui-animatediff\model目录下。

LoRA模型:下载八个控制镜头的LoRA模型并放置在…\stable-diffusion-webui\models\lora目录下。

Deforum:

功能:将静态图片转化为动态视频的插件。

安装方法:

打开Stable Diffusion Web UI,点击“扩展”。

选择“可下载”标签,输入“deforum”,点击“安装”。

安装后,点击“应用更改并重启”。

模型选择
Stable Video Diffusion:

功能:Stability AI发布的视频生成大模型,支持文生视频和图像到视频的生成。

使用方法:

下载并安装Stable Video Diffusion模型。

在Stable Diffusion Web UI中选择该模型进行视频生成。

图生图模型:

功能:用于将关键帧图像转换为统一风格的图像。

使用方法:

选择合适的图生图模型(如CyberRealistic - v3.3)。

在图生图页面中输入关键帧图像,设置提示词和参数,生成新的关键帧图像。

标签: none

添加新评论