官网入口
什么是 Stable Video
Sora
虽然是造势很大,但是个人猜测想要公开使用大概率是卡在了算力方面,所以迟迟没有动静,网上申请了红客应用的人们也没有收到邀请内测,奥特曼也在靠几个 demo 想拉 7 万亿美元
的投资实属有点异想天开了,种种不正常的表现引人遐想。
而就在这个是时候 Stability.ai
最新发布了 stable video
的官网,它是一个 AI 视频生成平台,用户可以通过文本或图像,将自己的想象转化为精美的视频片段。
这个工具作为一款正式公布的免费文生视频或者图生视频的工具,效果也是相当惊艳。
基本原理
Stable Video 使用的是 Stable Video Diffusion 1.1 模型
,在原本用于 2D 图像生成的潜在扩散模型的基础上,加入时间层,并且使用小型、高品质的影片资料集加以训练,试图将其改造成影片生成模型。 Stability AI 最新研究进一步定义出训练影片的三个阶段:
- STEP1-图像预训练: 2D text-to-image 预训练模型,也就是改变了大模型底模的参数。
- STEP2-视频预训练: 基于大规模视频训练集,进行视频训练,由于没有现成的视频质量审核模型来过滤所需要训练视频,所以这边引入了人工过滤规则。
- STEP3-高质量视频微调: 进一步提升模型生成的视频分辨率和质量,在整体训练步骤中还是借鉴了图像 diffusion model 的训练模式。
使用方式
使用方法有两种:
-
文生视频
:通过输入一段预先构思好的Prompt
文本即可生成想要的视频 -
图生视频
:通过上传一张预先准备好的图片
即可生成想要的视频
特点
- 每天免费
150 积分
,平均可以生成 15 段视频
,如果觉得积分不够用,有能力的同学还可以自行充值,10 美金
500 各积分,或者50 美金
3000 各积分,肯定是后者更加划算,这算下来能生成 200-300 个视频片段
网页在线使用
,不需要自己在本地手动安装,上手容易,避免很多不必要的麻烦,同时降低了使用的门槛,让大部分普通用户也能投身于这一伟大的事业2-4 秒的 MP4 影片
,效果惊艳,我觉得可以抵得上一般的电影画质了!- 支持
文生视频、图生视频
,这是两种主流的方式! - 支持
相机运动
,不同的相机运动会产生不同的影片风格,如镜头锁定,镜头环绕,镜头旋转等等,快去试试吧! - 支持
不同的视频风格
,比如动漫、艺术、3D 效果等等!
生成效果
下面就来欣赏一下精美画面吧!
适合什么人?
- 内容创作者,如最主要的就是电影、视频创作者、广告创作者等这一紧密相关的人群
- 普通用户,尤其是自己有丰富想象力并且想将其实现的人