【comfyui】ControlNet 辅助预处理器节点——controlnet_aux (线稿、深度图、法线、脸部身体姿态估计)(星2.1K)

相关资料下载https://pan.baidu.com/s/1mmgzGbccr4yVy29IUasOtg?pwd=0924

ComfyUI's ControlNet Auxiliary (/ɔːɡˈzɪliəri/) Preprocessors 预处理器节点 :https://github.com/Fannovel16/comfyui_controlnet_aux

参考代码:https://github.com/lllyasviel/ControlNet/tree/main/annotator

huggingface部分模型:https://huggingface.co/lllyasviel/Annotators/tree/main

测试工作流需要用到的节点:https://github.com/melMass/comfy_mtb

下图第一排第一张为输入,剩下都是处理得到的分割,线稿、二值,色块图、深度图、openpose,处理图等,这些处理后的图可直接输入到controlnet中

一、实测所有的预处理器效果预览 (完整模型约17G)

二、与controlnet联合一起使用(只用输入一张图片,自动根据条件重绘)

2.1 Dwpose提取姿态(dwpose是openpose的升级),后经controlnet重绘

在comfyui空白处双击,出搜索框

同样方式搜索 load image, preview image,,然后连到一起

接入controlnet

效果展示 (后续接入修复人脸工作流就可以了)

a group of people in city ,face details

controlnet相应的节点

完整工作流见包

2.2 线稿抽取重绘

a boy ride a pig 一个骑猪猪的男孩

完整工作流

相应的线稿抽取对比

contrlnet部分

相关推荐
多恩Stone2 小时前
【Stable Diffusion 1.5 】在 Unet 中每个 Cross Attention 块中的张量变化过程
stable diffusion
今夕节度使4 小时前
ARM架构推理Stable Diffusiond
stable diffusion
一刀到底2111 天前
comfyui利用 SkyReels-V2直接生成长视频本地部署问题总结 2 :寻找丢失的model 和工作流中 get set 方法的应用
人工智能·python·comfyui
远瞻。4 天前
【论文精读】2024 ECCV--MGLD-VSR现实世界视频超分辨率(RealWorld VSR)
人工智能·算法·stable diffusion·音视频·超分辨率重建
一刀到底2114 天前
comfyui 工作流中 视频长度和哪些参数有关? 生成15秒的视频,再加上RTX4060 8G显卡,尝试一下
人工智能·python·comfyui
远瞻。5 天前
【论文精读】2024 CVPR--Upscale-A-Video现实世界视频超分辨率(RealWorld VSR)
论文阅读·人工智能·算法·stable diffusion·音视频·超分辨率重建
乱世刀疤5 天前
AI绘画:手把手带你Stable Diffusion从入门到精通(系列教程)
人工智能·ai作画·stable diffusion
浪淘沙jkp6 天前
AI大模型学习三十、ubuntu安装comfyui,安装插件,修改返回405 bug,值得一看喔
人工智能·学习·ubuntu·comfyui·dify
layneyao7 天前
从0到1搭建AI绘画模型:Stable Diffusion微调全流程避坑指南
ai作画·stable diffusion
远瞻。7 天前
【论文精读】2024 arXiv --VEnhancer现实世界视频超分辨率(RealWorld VSR)
论文阅读·stable diffusion·音视频·超分辨率重建