图生视频,Stable Diffusion WebUI Forge内置SVD了!

在 Stable Diffusion WebUI Forge 版本中内置了一个SVD插件,也就是 Stable Video Diffusion(稳定视频扩散),之前我介绍过这个工具的使用方法:图片生成视频(独立部署SVD)

但是当时还不能集成到Stable Diffusion WebUI中,用起来比较不方便。现在Forge解决了这个问题,并且支持最新的1.1模型,这篇文章就来简单介绍下。

安装

插件是Forge内置的,不需要再次安装。

注意原版的SD WebUI没有这个插件,必须是Forge版本才有。

所以你如果要在WebUI中使用SVD,还需要安装SD WebUI Forge,程序地址:GitHub - lllyasviel/stable-diffusion-webui-forge

或者你可以使用我在AutoDL发布的镜像:

https://www.codewithgpu.com/i/lllyasviel/stable-diffusion-webui-forge/yinghuoai-sd15-webui-forge

使用

这个插件处理风景图片效果比较好,处理人或动物容易出现画面崩溃的情况。

下边是一些参数,我们可以根据自己的需要和实际的生成效果进行调整。

宽度、高度:按照图片尺寸设置即可,也可以设置更小的尺寸,自动裁剪。

Video Frames:是视频的总帧数,每一帧就是一个画面,把这些画面连起来就是视频了。

Fps:每秒帧数,也就是帧率,每一秒播放几个画面。Video Frames/Fps就是视频的时长。

Motion Bucket Id:运动Id,如果感觉视频动作变化太大,调小一点试试。

采样器、调度器:和文生图、图生图中的一样,可以选择自己常用的,注意搭配合适的采样步数。不过默认的一般就挺好了。

随机数种子,相同的种子会生成相同的结果,-1代表每次使用不同的种子。

素材

我测试了一些风景图片素材,还有对应的图生视频模型,你可以在下边的网盘链接中获取到:

链接:https://pan.baidu.com/s/1zPTXNqJu1ecT-af5Cz0cfg?pwd=shiz

提取码:shiz


如有问题,欢迎留言。

相关推荐
REDcker4 天前
WebCodecs VideoDecoder 的 hardwareAcceleration 使用
前端·音视频·实时音视频·直播·webcodecs·videodecoder
gihigo19984 天前
基于TCP协议实现视频采集与通信
网络协议·tcp/ip·音视频
山河君4 天前
四麦克风声源定位实战:基于 GCC-PHAT + 最小二乘法实现 DOA
算法·音视频·语音识别·信号处理·最小二乘法·tdoa
音视频牛哥4 天前
Android平台RTMP/RTSP超低延迟直播播放器开发详解——基于SmartMediaKit深度实践
android·人工智能·计算机视觉·音视频·rtmp播放器·安卓rtmp播放器·rtmp直播播放器
qq_416276424 天前
通用音频表征的对比学习
学习·音视频
美狐美颜sdk4 天前
Android全局美颜sdk实现方案详解
人工智能·音视频·美颜sdk·视频美颜sdk·美狐美颜sdk
EasyDSS4 天前
私有化部署EasyDSS视频点播能力:全链路视频技术赋能,打造企业级视听新体验
音视频·hls·m3u8·点播技术·智能转码
qq_416276424 天前
DeLoRes——一种通用的音频表征学习新方法(DeLoRes(基于 Barlow Twins 的冗余最小化方法)
学习·音视频
Q_4582838684 天前
从定位到视频:808 + 1078 在各行业的落地实践
音视频
山顶望月川4 天前
实测MiniMax-Hailuo-02:当“开工大吉“变成“无字天书“,国产AI视频模型的能与之不能
人工智能·音视频