第013章:AIGC视频创作(即梦Seedance2.0)

目前即梦Seedance2.0模型,就是所有视频模型中的No.1,没有之一!无论是国内、国外,还是闭源、开源。他的能力在当下都是绝对的第一,缺点就是使用起来太贵!而且如果直接在官方使用的话需要排队,而且还排的比较久。

里面末尾带VIP的版本,只有充了会员才可以用,排队情况能稍微好点。不带VIP的版本我们不充会员,用免费的积分也可以使用。

其中末尾带Fast版本的,相比不带Fast版本的速度会快一点,质量上会有一点点的降低。

即梦的视频生成,有两种模式,一种是"全能参考",一种是"首尾帧"。

"首尾帧",是目前AI视频生成这块,用的比较多的方法,就是给两张图片,一张是开始的画面,一张是结束的画面,让AI去生成中间的过渡画面。

在"首尾帧"模式下,以前的Seedance1.0也是可以使用的,我们在学习的时候可以使用,消耗的积分更少,速度也更快。

"全能参考",是专属于Senndance2.0模型的新模式**。** 意思是:同时用图片、短视频、音频、文字四种素材一起当参考,自由拆分复用不同素材的优点,精准控制生成视频的人物、场景、动作、镜头、节奏、画风。 区别于只靠文字 / 只锁首尾图的普通模式,它能一次性参考多种素材,所以叫 "全能"。

我们可以看到,在"全能参考"模式下,以前的1.0模型是没法使用的。

至于最后那个"智能多帧",大家可以不用管,实际的使用效果比较差,其实就是重复首尾帧的意思。即梦除了最早的seedance1.0,后来的1.5、2.0都不支持。

下来我给大家演示一下,视频生成。

第一步:我们先用文生图的形式,生成一个小白虎主角。我的提示词是这样写的:"一只戴着时髦黑色圆形墨镜的小白虎,直立着身体,全身像,一只爪子握着云台把手,举起固定在云台上的黑色运动相机,相机上印有白色"品牌"两个字体。简单的背景。"。

第二步 :我们用图生图的方式,给这个小老虎换一个场景。提示词这样写:"白色小老虎踮起脚尖,将固定在云台上的黑色运动相机举过头顶自拍,咧嘴露出搞怪笑容,背景是西安城墙的灰色垛口和远处若隐若现的钟楼,清晨金色阳光斜洒在城砖上;低角度仰拍,中心构图突出小老虎与城墙轮廓;氛围轻松兴奋,墨镜反光中映出城墙全景,一旁木牌上写着"长安·常安"。

第三步:我们用图生视频的方式,让这个图片动起来,做一个小视频。提示词这样写:"固定镜头,轻微向前推近,小白虎单脚抬起蹦跳着,单手举着相机对着镜头自拍,咧嘴笑着 "说话",墨镜镜片里反射出城墙风光,背景夕阳缓慢下沉,整体带轻微移动拖影,还原边走边拍的 vlog 感。"。

我用的Seedance2.0,因为1.0和1.5只会生成动画,声音音乐之类的还需要我么自己后期去配,而2.0会根据动画自己把音乐和声音都给配好,大部分的情况下配的还是很OK的,生成的视频如下,大家可以看看效果:

AIGC视频创作(即梦Seedance2.0)

大家有没有发现一个问题,我们上面说的是用"首位帧",也就是两张图片来生成视频,可我在这里做视频的时候,只用了一张图片,也就是"首帧"。为什么呢?

现在所有的视频生成模型,最长的视频生成时间是15秒,而在实际使用的过程中,一般超过10秒稳定性就会降低很多。

我们大部分情况下每次都是生成5秒的视频,一般稳定性都有保证。再一个很多时候,为了更好的效果我们可能需要频繁的多次抽卡,这个时候不管是时间上的成本,还是金钱上的成本。5S的时长都是相对而言性价比最好的一个选择。

对于一个5s的视频而言,我们如果做一个1分钟的视频,那就需要12个5s的片段。再不需要换场景的时候,我们一般都是先生成第一段视频,然后在用第一段的最后一个画面,当作下一段的第一帧,这样循环着往下生成。

到这里,我们已经学习了即梦的图片生成、图片编辑、视频生成。算是对AIGC的核心功能有了一定的了解。

从下一章开始,我们将进入ComfyUI的学习,我们下章再见!