IP-Adapter学习

参考:https://baijiahao.baidu.com/s?id=1803373544569190578\&wfr=spider\&for=pc

IP-Adapter 是 SD中比较重要的controlnet,由腾讯公司出品。主要原理:提取图像特征,并嵌入预训练文本,最终加入到扩散图像中。简单理解,提取图像的特征:构图特征、面部特征,根据权重参数与原prompt进行融合,共同作用到扩散图像上。

以下面这张图举例:

从条件图中提取特征,包括前景、背景结构,任务特征等。

简单案例:https://blog.csdn.net/qq_41314882/article/details/140517620

其中也有讲述InstanID的内容,结论:在面部处理上InstantID 优于 IP-Adapter

相关文档:https://baijiahao.baidu.com/s?id=1806079149555811709\&wfr=spider\&for=pc

相关推荐
GPU实战笔记2 天前
ComfyUI 镜像首跑:先验证自启动与端口入口,再处理外部服务集成
comfyui·故障排查·镜像部署·云端gpu·端口访问
jianpeng的工程笔记2 天前
Qwen-Image-2.1 图像编辑拆解:从透明改字到多图合成
人工智能·qwen·图像生成·comfyui
AIGC小尼2 天前
本地AI漫剧部署|低配8G显存实战部署MiniMax-H3|4步极速采样+低显存优化完整方案(可角色替换/视频魔改)
人工智能·stable diffusion·comfyui·ai漫剧
福大大架构师每日一题4 天前
ComfyUI v0.36.0更新:视频拼接、通用循环、Yue2音乐、Marigold v2与大量合作节点全面上线
comfyui
每天死循环4 天前
ComfyUI 桌面版保姆级图文教程 · 第二节:一张手抄报彩图,出「深线稿 + 浅线稿」两张涂色卡
ai作画·comfyui·手抄报
论文复现现场4 天前
ComfyUI 怎么同时调用 4 张/8 张 RTX 4090?AI 视频批量生成的多实例队列与 Python 调度方案
人工智能·python·comfyui·rtx4090
wsad05326 天前
ComfyUI 学习笔记:权重(Weight)是什么
comfyui
每天死循环6 天前
ComfyUI 桌面版保姆级图文教程 · 第一节:从安装到出第一张图
ai·文生图·安装软件·comfyui·comfyui桌面版
wsad05327 天前
ComfyUI 学习笔记:Load Checkpoint vs Load Diffusion Model vs Load VAE
comfyui
wsad05327 天前
ComfyUI 学习笔记:图像生成过程全总结
comfyui