ComfyUI-AniPortrait——数字人插件

仓库地址:++GitHub - chaojie/ComfyUI-AniPortrait++

往期学习资料

整理AI学习资料库

需要的模型如下

工作流如下:

首先把上面的sd-vae-ft-mse、wav2vec2-base-960h模型放到下面的目录,如下

其他模型放到哪里都行,反正是自定义模型路径的,如下

或者你全部模型都放到下面的pretrained_model目录下面也是可以的,反正指定模型路径的时候是手动设置的,放在哪里都可以。

到时我就指定这些模型的路径分别如下:

D:\硬盘备份\stable diffusion\其他模型\AniPortrait节点所需模型\stable-diffusion-v1-5

D:\硬盘备份\stable diffusion\其他模型\AniPortrait节点所需模型\sd-vae-ft-mse

D:\硬盘备份\stable diffusion\其他模型\AniPortrait节点所需模型\sd-image-variations-diffusers\image_encoder

D:\硬盘备份\stable diffusion\其他模型\AniPortrait节点所需模型\wav2vec2-base-960h

D:\硬盘备份\stable diffusion\其他模型\AniPortrait节点所需模型\AniPortrait/audio2mesh.pt

D:\硬盘备份\stable diffusion\其他模型\AniPortrait节点所需模型\AniPortrait/motion_module.pth

D:\硬盘备份\stable diffusion\其他模型\AniPortrait节点所需模型\AniPortrait/denoising_unet.pth

D:\硬盘备份\stable diffusion\其他模型\AniPortrait节点所需模型\AniPortrait/reference_unet.pth

D:\硬盘备份\stable diffusion\其他模型\AniPortrait节点所需模型\AniPortrait/pose_guider.pth

然后设置视频路径,如下

然后设置音频文件路径,如下

或者你直接设置为视频的路径也是可以的,如下

然后上传图片,如下

然后下面的模型位置也改改,如下

我本地改为如下:

D:\硬盘备份\stable diffusion\其他模型\AniPortrait节点所需模型\wav2vec2-base-960h

这样就行了,看看生成的视频怎样的,如下

我们打开看看,如下

效果就是生成的视频人物是我们上传的图片,视频里面人物说的话就是我们上传的音频,也就是它生成的视频是有声音的,是对口型的,然后视频里面的人物动作是根据我们上传的视频里面的人物决定的,也就是下面的视频,如下

其实下面这种视频也可以,如下

也就是openpose预处理后的视频,如上

然后视频的长度也是根据上传的视频决定的。

你可以上传动漫图片,然后上传的视频是写实类型的视频,如下

上传了一张18号图片,视频上传的是一个蓝头发女生唱歌的视频,那么生成的视频效果就是18号在唱歌,而且动作表情啥的跟蓝头发女生是一致的。

更多好玩且实用AIGC技术

星球号:32767063

往期学习资料

整理AI学习资料库

相关推荐
feasibility.1 天前
MiniMax H3-Base 开源后快速出片:VDN-H3、FastH3和QuantFunc对比分析
aigc·comfyui·图生视频·minimax·openvdn·fastvideo·quantfunc
漂着的圆木1 天前
AI视频模型路由怎么选?Runway新评测里的成本与可用率陷阱
成本优化·视频生成·ai视频·模型路由·runway
Eric.462 天前
8G 显存极限优化|SDXL+ComfyUI 本地部署 AI 漫剧批量生产工作流(源码 + 报错根治)
人工智能·ai绘画·comfyui·本地部署·ai漫剧
Eric.462 天前
ComfyUI 本地部署 AI 漫剧与 AI 视频流水线:消费级显卡显存优化、角色一致性工程实战
人工智能·自动化·音视频·comfyui·ai漫剧
Eric.462 天前
2025 深度实战:本地部署 AI 漫剧与 AI 视频全量产方案,彻底解决云端画质抖动、角色漂移、成本超标
大数据·人工智能·音视频·comfyui·ai漫剧
浪淘沙jkp2 天前
【ComfyUI 国产模型炼丹记】第一篇:V100 16G 部署 Wan2.2:从环境配置到首次出片
文生视频·comfyui·ai模型·wan2.2·wan2.1·v100 16g
漂着的圆木3 天前
Flow音效可分轨后,AI视频怎样防止音画错位与混错版本
版本管理·ai视频·音画同步·googleflow·音效制作
VIP_CQCRE3 天前
用 Ace Data Cloud 快速接入 Flux Videos API:从文生视频到图生视频
aigc·api·flux·ai视频·acedatacloud
Maynor9963 天前
Kling 4.0(可灵 4.0)怎么用?上线时间、Flash 版、价格与提示词全攻略(2026 最新)
人工智能·aigc·视频生成·ai视频·可灵
Maynor9963 天前
开源12个电商出图Agent Skills:GPT Image 2.5一键出图
gpt·ai绘画·跨境电商·claude code·agent skills·gpt image