最近很火的“30秒展现女孩的一生”AI视频制作全流程

最近很火的AI视频,30秒展现一个人的一生,我们来看一下制作流程

包含以下知识点

  • 安装ComfyUI + AnimeDiff插件
  • 使用Prompt travel描述视频画面

加载工作流文件

在BatchPromptSchedule这个节点里描述出画面的内容,前面的数字代表对应的帧数

json 复制代码
"0" : "a new born baby girl lying on a crib crying, top view",
"20" : "a new born baby girl lying on a crib crying, top view",
"40" : "a 5 years old toddler",
"60" : "a 5 years old toddler",
"80" : "10 year old girl running",
"120" : "10 year old girl running",
"140" : "20 year old woman graduates from college, on campus",
"160" : "20 year old woman graduates from college, on campus",
"180" : "25 year old woman working in office, professional suit",
"200" : "25 year old woman working in office professional suit",
"220" : "35 year old woman holding a baby, casual clothing",
"240" : "35 year old woman holding a baby, casual clothing",
"260" : "50 year old woman, looking at viewer, casual clothing",
"280" : "50 year old woman, looking at viewer, casual clothing",
"300" : "80 year old woman, looking at viewer, casual clothing",
"320" : "80 year old woman, looking at viewer, casual clothing",
"340" : "90 year old woman, top view, lying on death bed, hospital clothing, eyes closed",
"360" : "90 year old woman, top view, lying on death bed, hospital clothing, eyes closed"

安装缺失的node组件

第一次载入这个工作流之后,ComfyUI可能会提示有node组件未被发现,我们需要通过ComfyUI manager安装,它会自动找到缺失的组件并下载安装(!!需要网络通畅)。

点击ComfyUI Manager按钮打开组件管理

再点击Install Missing Custom Nodes安装组件

安装完成后要重启ComfyUI才能完成载入刚才缺失的组件。

如果网络状态不好,可能会导致下载组件失败,需要多试几次

选择一个检查点模型

下载模型DreamShaper 8。

将safetensors文件放入文件夹ComfyUI > models > checkpoints中。

刷新浏览器标签页。 找到节点"Load Checkpoint"。点击ckpt_name下拉菜单,选择dreamshaper_8模型。

选择一个VAE

下载VAE。将文件放入文件夹ComfyUI > models > vae中。

刷新浏览器页面。

在Load VAE节点中,选择刚刚下载的文件。

选择AnimateDiff动作模块

下载 AnimateDiff v1.5 v2 动作模型。

将其放入文件夹 ComfyUI > custom_nodes > ComfyUI-AnimateDiff-Evolved > models 中。

刷新浏览器页面。

在AnimateDiff Loader节点中,在model_name下拉菜单中选择mm_sd_v15_v2.ckpt。

下载负向嵌入

这个工作流程使用了BadDream负面嵌入在负面提示中。

它是为Dream Shaper模型训练的负面嵌入。

下载BadDream嵌入文件。

将文件放入ComfyUI > models > embeddings目录中。

生成视频

点击"Queue Prompt"开始生成视频。

进度条将出现在KSampler节点上。

当完成时,将在视频合并节点中看到视频出现。

相关推荐
小和尚同志5 小时前
54.6k star 的 Multica: 集多 Agent 和看板于一体的 AI 平台
人工智能·aigc·three.js
一枕槐安4875 小时前
少样本提示(Few-shot)在业务场景的落地实践
大数据·人工智能·意图分类·mmr多样性·knn检索·动态示例选择
王中阳Go6 小时前
后端转 Agent 岗面试怎么答:8 个高频问题与应答口径
人工智能·后端·python·大语言模型
海宇AI6 小时前
零信任架构实战:基于海宇个人风险报告构建自动化分期商城信用额度初审网关
运维·人工智能·架构·自动化
tellmewhoisi6 小时前
深度学习32:卷积神经网络:卷积层(卷积运算,填充,步幅)
人工智能·深度学习·cnn
weixin_307779137 小时前
RAG 面试陷阱——混合检索并非无条件优越:一个条件反转实验
人工智能·python·面试·职场和发展
Sinokap7 小时前
OpenAI 披露 AI 安全实验:智能体如何突破隔离边界?
人工智能·安全
云和数据.ChenGuang8 小时前
深入解析 Python 的 dir():从用法到 CPython 源码实现
开发语言·人工智能·python·langchain
重生之我在番茄自学网安拯救世界8 小时前
AI 开发者日报 第1期(本周精选)| 插件市场投毒、智能体搞出“官僚饥荒村”,十年前的 CNN 打赢大模型
人工智能·网络安全·大模型·ai编程·智能体
涛声依旧-底层原理研究所8 小时前
拆解 Cordis 底座:Agent 是如何被「组合」出来的
人工智能·架构