Sora不香了,Runway Gen-3震撼发布!AI电影时代真的要来了!(附与快手可灵对比测试)

大家好,我是程序员X小鹿,前互联网大厂程序员,自由职业2年+,也是一名 AIGC 爱好者,持续分享前沿的「AI工具」和「AI 副业玩法」,期待和大家一起交流~

文章首发于公众号:X小鹿AI副业

AI 视频太卷了!

刚上线的快手可灵(Kling)、Luma AI 的 Dream Machine 的热乎劲还没过,Runway 又发布重磅消息:

Runway Gen-3 来了!

上一次 Runway 带来这么重磅的消息,记得还是去年的 11 月份:Gen-2 的发布。

程序员X小鹿:【AI视频】文本生视频工具又迎来重大更新,Runway Gen-2 到底有多强?

Runway Gen-2 的发布,让更多的人认识了 AI 视频领域的这位王者。

因为不管是从生成视频的真实性、一致性还是可控性等方面,Runway 在众多 AI 视频工具中,都可以算的上排在前列的。

不过此后 Runway 便一直很低调。直到今天,时隔半年之久,AI 视频领域的王者,Runway 终于回来了!

一、视频展示

先来看几个官方示例感受一下:

下面所有视频都是使用 Gen-3 Alpha 生成的,没有经过任何修改。

视频上传不方便,Runway 官网看吧:

runwayml.com/blog/introd...

从这几个官方示例视频就可以看到,不管是从运镜效果、真实性、以及对非真实世界的概念的理解方面,都不禁让人感叹:AI 电影时代真的要来了!

二Runway Gen-3 有哪些重磅更新

从 Runway 官网来看,Gen-3 Alpha 在保真度、一致性以及动作方面,相比 Gen-2 都有了重大改进,是构建通用世界模型的一步。

1、更高的可控性

上周体验的快手的可灵(Kling)、Luma AI 的 Dream Machine,在可控性方面,可以说基本没有。

生成的视频如果不满意,只能调整提示词、一次次的 roll。

当然也可能是因为他们刚刚上线的原因,这方面还没有更新。

相比之下,Runway 的可控性就高很多了。

在 Runway Gen-3 之前,就已经有了运动画笔、高级摄像机控制、导演模式。

Gen-3 发布后,Runway 也将推出更多工具的支持,用于更精细地控制结构、风格和运动。

2、细粒度时间控制

Gen-3 Alpha 已经过高度描述性、时间密集的字幕训练,能够对场景中的元素进行富有想象力的过渡和精确的关键帧。

视频太多,传着太麻烦。视频示例直接看这里吧:

Sora不香了,Runway Gen-3震撼发布!AI电影时代真的要来了!(附与快手可灵对比测试)

**,时长00:10

Prompt: A tsunami coming through an alley in Bulgaria, dynamic movement.

提示:一场海啸从保加利亚的一条小巷中传来,动态运动。

**,时长00:10

Prompt: A first-person POV shot rapidly flies towards a house's front door at 10x speed.

提示:第一人称 POV 镜头以 10 倍的速度快速飞向房屋的前门。

3、逼真的照片级人物

Gen-3 Alpha 擅长通过各种动作、手势和情感生成富有表现力的人类角色,从而解锁新的讲故事机会。

**,时长00:10

Prompt: A middle-aged sad bald man becomes happy as a wig of curly hair and sunglasses fall suddenly on his head.

提示:一个中年悲伤的秃头男人变得快乐,因为一顶卷发和太阳镜突然落在他的头上。

可以看到表情的变化非常明显。同样的提示词,试了是快手的可灵:

**,时长00:05

快手的可灵(Kling),没有表现出太多情感的变化。还有头顶上放着好几个太阳镜。明显是并没有理解这个语义。

4、为艺术家打造

训练 Gen-3 Alpha 是由研究科学家、工程师和艺术家组成的跨学科团队的共同努力。可以很好地诠释各种风格和电影术语。

**,时长00:10

Prompt: Zooming through a dark forest with neon light flora lighting up. 提示:在黑暗的森林中放大,霓虹灯下的植物群被照亮。

**,时长00:10

Prompt: A giant humanoid, made of fluffy blue cotton candy, stomping on the ground, and roaring to the sky, clear blue sky behind them.

提示:一个巨大的人形生物,由毛茸茸的蓝色棉花糖制成,踩在地上,咆哮着冲天而起,身后是湛蓝的天空。

同样的提示词,试了试快手的可灵,除了有些呆、少了些震感的效果,其他还好:

**,时长00:05

5、行业定制

Runway 一直在与领先的娱乐和媒体组织进行合作,以创建 Gen-3 的定制版本,允许更风格化的控制和一致的角色,针对特定的艺术和叙事需求。

结束语

这一年,涌现出了太多的 AI 视频工具。我们时不时的就会在网上听到,哪家又开发出了一款多么炸裂的 AI 视频工具,哪家又发布了一项多么重大的更新。

2024,AI 视频不管是用于影视、广告、电商等行业的日常工作,还是用来做自媒体、做副业,都将大有可为。

更多 AI 视频工具,可以在【AI工具】专栏中查看,持续更新。


觉得文章有帮助,请帮忙点赞收藏关注一下呦~

我是程序员X小鹿,前互联网大厂程序员,自由职业2年+,也是一名 AIGC 爱好者,欢迎一起交流~

相关推荐
AI极客菌2 小时前
Controlnet作者新作IC-light V2:基于FLUX训练,支持处理风格化图像,细节远高于SD1.5。
人工智能·计算机视觉·ai作画·stable diffusion·aigc·flux·人工智能作画
水豚AI课代表8 小时前
分析报告、调研报告、工作方案等的提示词
大数据·人工智能·学习·chatgpt·aigc
程序员X小鹿10 小时前
全部免费!6款AI对口型神器,让照片开口说话唱歌,早晚用得上,建议收藏!(附保姆级教程)
aigc
真忒修斯之船10 小时前
大模型分布式训练并行技术(三)流水线并行
面试·llm·aigc
学习前端的小z12 小时前
【AIGC】如何通过ChatGPT轻松制作个性化GPTs应用
人工智能·chatgpt·aigc
zzZ_CMing14 小时前
大语言模型训练的全过程:预训练、微调、RLHF
人工智能·自然语言处理·aigc
杰说新技术17 小时前
Meta AI最新推出的长视频语言理解多模态模型LongVU分享
人工智能·aigc
热爱跑步的恒川1 天前
【论文复现】基于图卷积网络的轻量化推荐模型
网络·人工智能·开源·aigc·ai编程
火山引擎边缘云1 天前
创新实践:基于边缘智能+扣子的智慧婴儿监控解决方案
物联网·aigc·边缘计算
算家云1 天前
如何在算家云搭建Aatrox-Bert-VITS2(音频生成)
人工智能·深度学习·aigc·模型搭建·音频生成·算家云