IP-Adapter学习

参考:https://baijiahao.baidu.com/s?id=1803373544569190578\&wfr=spider\&for=pc

IP-Adapter 是 SD中比较重要的controlnet,由腾讯公司出品。主要原理:提取图像特征,并嵌入预训练文本,最终加入到扩散图像中。简单理解,提取图像的特征:构图特征、面部特征,根据权重参数与原prompt进行融合,共同作用到扩散图像上。

以下面这张图举例:

从条件图中提取特征,包括前景、背景结构,任务特征等。

简单案例:https://blog.csdn.net/qq_41314882/article/details/140517620

其中也有讲述InstanID的内容,结论:在面部处理上InstantID 优于 IP-Adapter

相关文档:https://baijiahao.baidu.com/s?id=1806079149555811709\&wfr=spider\&for=pc

相关推荐
Mr数据杨2 天前
【ComfyUI】Flux Kontext 人物,背景图像组合生成
comfyui
love530love2 天前
【笔记】ComfUI RIFEInterpolation 节点缺失问题(cupy CUDA 安装)解决方案
人工智能·windows·笔记·python·插件·comfyui
Mr数据杨4 天前
【ComfyUI】Mochi 文本转视频
comfyui
Mr数据杨5 天前
【ComfyUI】Flux Depth 深度检测引导 LoRA 图像生成
comfyui
love530love6 天前
解决 ComfyUI 启动显示 ‘sox‘ 命令未找到错误:从安装到配置的完整指南
人工智能·windows·python·aigc·comfyui·comfyui-manager
将心ONE10 天前
安装ComfyUI
comfyui
ai_xiaogui11 天前
Mac苹果版Krita AI一键安装教程:AIStarter+ComfyUI零基础部署全流程(X86/ARM双架构)
arm开发·人工智能·macos·comfyui·一键部署·ai绘画教程·kritaai
雾岛心情15 天前
【ComfyUI】ComfyUI 的WordCloud词云节点
aigc·comfyui
Mr数据杨15 天前
【ComfyUI】Wan2.2 SmoothMorph 丝滑变装首尾衔接视频生成
comfyui
Sanlings18 天前
ComfyUI+RX5700XT+Ubuntu25.04运行配置
pytorch·ai·comfyui·amd·rocm·rx5700xt·ubuntu25.04