用AI将梗图升级为视频
丰色 发自 凹非寺
量子位|公众号QbitAI
用AI把经典表情包升级为视频,这种创意玩法最近属实是有点火。
比如那张最经典的 "男人扭头看红裙女子" ,现在是这样婶儿的:

最绝的还是它的续集:
男人被发现了,狼狈转头,甚至是他的老婆也很尴尬(狗头)

有人看完当即拍大腿:
这么多年了,终于知道这对couple的故事了。

而除了这张表情包,还有很多咱熟悉的图都被AI恶搞了一遍。
比如这个:
看小女孩手里的火柴,简直让人恍然大悟,怪不得自家房子着火了她却笑得如此淡定。

当然了,还有咱们最经典的老爷子:

以及励志小baby:

这波,看得大伙是停不下来,根本停不下来。

Stable Video立大功
在这些作品评论区,许多网友都在问用什么工具做的。

咳咳,原来全部出自Stable Video Diffusion(SVD)。

这个来自Stable AI的首款视频生成工具5天前刚刚发布,可以通过文字或图像生成14fps或25fps的作品。
据称在用户评估中比Runway的Gen还受欢迎。
如推特网友@cocktail peanut介绍,如果你也想制作如上好玩的效果,只需将对应的表情包图像丢给它就行。

只需稍等片刻,图片就"活"了:
老头子一边喝水一边敲键盘。

基于此,这位网友还开发了进阶玩法:给表情包中的人物变脸。
这就需要另一个工具facefusion(可以在Pinokio上一键本地安装)。
操作同样很简单,我们只需提供给视频,以及一张Emad Mostaque(Stable AI老板)的图片就行:

当当:
现在变成了Emad喝水了。

需要注意的是,Stable Video Diffusion目前还未完全对外开放,只能加入waitlist排队等试玩资格。
不过对此,你有两种其他选择:
一是使用fal.ai提供的SVD接口。

亲测好使,也是直接上传图片即可:

二是试试不用排队就能立即使用的Gen-2,毕竟它也可以将图片作为输入变成视频,并且可以同时提供提示词(用它最新出的运动笔刷功能也可)。

这不,有网友做了一张这个,效果相当OK(动态性特别强):

最后,对于如此创意玩法,细心的网友也发现了一些瑕疵。
比如如果细看表情包人物的脸,有时还是蛮可怕的。

以及还是这张图,可以发现,男人的眼睛其实并没有盯着红裙女子看,而是前方。


这说明AI在理解表情包含义上还需要继续努力。
最最最后,还有一个小彩蛋:
AI发现,故事可能还有另一种续集,那就是红裙女子旁边其实站着一个肌肉大汉,这是4个人的故事(狗头)

如果没有这缕乱入的头发就完美了==
参考链接: