大家好,我是程序员X小鹿,前互联网大厂程序员,自由职业2年+,也是一名 AIGC 爱好者,持续分享前沿的「AI工具」和「AI 副业玩法」,期待和大家一起交流~(资料都在公众号)
之前分享了几款可以「让照片说话」的 AI 工具,像下面这样,上传一张照片 + 一段音频,就可以生成口型同步的视频:
视频无法直接上传,感兴趣可以这里看原视频:原视频(下面的视频也是)
发现大家对这类对口型视频的制作还挺感兴趣的。
既然如此,那今天X小鹿就再介绍一款可以「让照片说话唱歌」的 AI 工具。
一、效果展示
最近看到 Viggle 也上线了对口型的功能(Mic),不仅能实现对口型,还能让角色移动起来!
先来看下 Viggle 官方的宣传视频:
下面是使用 Viggle 制作的一段对口型视频(左上角是上传的照片):
效果还可以~
二、实操教程
Viggle 的对口型功能(Mic),目前只在 Viggle 的 APP 中可使用,在网页版和 Discord 上,还没有更新对口型的功能。
打开 Viggle APP,点最下面的「+」,选择「Mic」。
操作也比较简单,只需 4 步:
设置人物形象、音频、背景和动作,点「Generate」就可以等待生成了。
1、设置人物形象
① 可以选「Camera」直接拍摄,也可以点「Album」从相册中选择。
要求:单人正面、全身、手在两侧、纯色背景
② 也可以直接从 Viggle 的系统库中选择人物形象。
有 Realistic(真人)、Cartoon(卡通)、CG(游戏角色)可供选择。
2、设置音频
可以通过下面 4 种方式获取音频:
① Song:使用 Viggle 自带的音乐库
② Extract:上传视频提取音频
③ Text:文字转音频
④ Record:录音
3、设置背景
背景根据自己需求选择就好了。设置成 Green,后续方便抠出,放在其他的场景中。
4、设置动作
支持直接从 Viggle 模板库中选,也支持自己上传或录制。(这一步是可选)
上面步骤设置完成,点生成就可以等待下载了。下面是生成的对口型视频:
最后点「分享」-「下载」即可。
三、总结
Viggle 基于 JST-1 模型,JST-1 模型第一个具有实际物理理解的视频 3D 基础模型。
除了刚才介绍的 Mic 对口型的功能,Viggle 还有很多其他玩法。
比如,上传一张人物角色图片 + 一段视频,就可以将视频中的人物,替换成图片中的角色。
优势
- Viggle 的对口型(Mic)功能,不仅能实现对口型,还能让角色移动起来!通过声音和动作,来完全控制你的角色。
- 可以生成较长的对口型视频
- 目前免费
缺点
Viggle 是国外 AI 工具,而且 Viggle 网页版目前还没有 Mic 这项功能,只能在 Viggle 的 APP 上使用。国内下载会麻烦一些。
Viggle:viggle.ai/
四、更多对口型AI工具
觉得文章有帮助,请帮忙点赞收藏关注一下呦~
我是程序员X小鹿,前互联网大厂程序员,自由职业2年+,也是一名 AIGC 爱好者,欢迎一起交流~