【comfyui】ControlNet 辅助预处理器节点——controlnet_aux (线稿、深度图、法线、脸部身体姿态估计)(星2.1K)

相关资料下载https://pan.baidu.com/s/1mmgzGbccr4yVy29IUasOtg?pwd=0924

ComfyUI's ControlNet Auxiliary (/ɔːɡˈzɪliəri/) Preprocessors 预处理器节点 :https://github.com/Fannovel16/comfyui_controlnet_aux

参考代码:https://github.com/lllyasviel/ControlNet/tree/main/annotator

huggingface部分模型:https://huggingface.co/lllyasviel/Annotators/tree/main

测试工作流需要用到的节点:https://github.com/melMass/comfy_mtb

下图第一排第一张为输入,剩下都是处理得到的分割,线稿、二值,色块图、深度图、openpose,处理图等,这些处理后的图可直接输入到controlnet中

一、实测所有的预处理器效果预览 (完整模型约17G)

二、与controlnet联合一起使用(只用输入一张图片,自动根据条件重绘)

2.1 Dwpose提取姿态(dwpose是openpose的升级),后经controlnet重绘

在comfyui空白处双击,出搜索框

同样方式搜索 load image, preview image,,然后连到一起

接入controlnet

效果展示 (后续接入修复人脸工作流就可以了)

a group of people in city ,face details

controlnet相应的节点

完整工作流见包

2.2 线稿抽取重绘

a boy ride a pig 一个骑猪猪的男孩

完整工作流

相应的线稿抽取对比

contrlnet部分

相关推荐
YoanAILab1 天前
AI 推理系统架构怎么选?图像生成与文本生成的分层选型思路(ComfyUI / Dify / vLLM / Triton)
人工智能·系统架构·comfyui·dify·vllm·ai工程
一个没有本领的人2 天前
win11配置Stable-diffusion-1.5
stable diffusion
AI成长日志2 天前
【扩散模型专栏】文本到图像生成实战:Stable Diffusion架构解析与代码实现
人工智能·stable diffusion·架构
1204157137 肖哥4 天前
ComfyUI 图片高清放大的正确顺序
comfyui
yy我不解释5 天前
关于comfyui的mmaudio音频生成插件时时间不一致问题(三)
开发语言·python·ai作画·音视频·comfyui
yy我不解释5 天前
关于comfyui的mmaudio音频生成插件时时间不一致问题(四)(video upload)(解决方法)
开发语言·python·ai作画·音视频·comfyui
Shining05965 天前
AI 编译器系列(六)《Stable Diffusion 在 InfiniTensor 推理框架中的适配与工程实践》
人工智能·算法·stable diffusion·大模型·图像生成·ai编译器·infinitensor
维度攻城狮6 天前
AI 工具加持:ComfyUI 节点开发极速上手
人工智能·python·comfyui·工作流·节点图
yy我不解释7 天前
关于comfyui的mmaudio音频生成插件时时间不一致问题(一)
python·ai作画·音视频·comfyui
虎冯河10 天前
怎么在comfyui的虚拟环境下安装插件的requirements.txt
comfyui