IP-Adapter学习

参考:https://baijiahao.baidu.com/s?id=1803373544569190578\&wfr=spider\&for=pc

IP-Adapter 是 SD中比较重要的controlnet,由腾讯公司出品。主要原理:提取图像特征,并嵌入预训练文本,最终加入到扩散图像中。简单理解,提取图像的特征:构图特征、面部特征,根据权重参数与原prompt进行融合,共同作用到扩散图像上。

以下面这张图举例:

从条件图中提取特征,包括前景、背景结构,任务特征等。

简单案例:https://blog.csdn.net/qq_41314882/article/details/140517620

其中也有讲述InstanID的内容,结论:在面部处理上InstantID 优于 IP-Adapter

相关文档:https://baijiahao.baidu.com/s?id=1806079149555811709\&wfr=spider\&for=pc

相关推荐
wuhui21002 天前
ComfyUI 快速文生图模型生成
大模型·comfyui
jiayong233 天前
AI工作流实现原理深度解析
人工智能·comfyui·工作流·coze
西安老张(AIGC&ComfyUI)5 天前
第006章:ComfyUI图片绘制常用大模型介绍
人工智能·aigc·comfyui
love530love6 天前
【笔记】ComfyUI 源码部署版更新后一键修复:从手动补丁到自动化工作流
运维·人工智能·windows·笔记·python·自动化·comfyui
wj30558537820 天前
课程 1:WSL + uv + ComfyUI 环境选择说明
python·wsl·cuda·uv·comfyui
wj30558537820 天前
课程 2:使用 uv 安装 ComfyUI
python·uv·comfyui
wj30558537821 天前
课程 9:模型测试记录与 Prompt 策略
linux·人工智能·python·comfyui
雪狼之夜22 天前
comfyui安装(非整合包,直装)-图文教程
comfyui
wj30558537823 天前
课程 5:将官方 LTX-2.3 工作流改造成 GGUF 主模型工作流
python·cuda·comfyui
love530love24 天前
ComfyUI:为什么说它是 AIGC 应用层面的集大成者?
人工智能·pytorch·windows·aigc·devops·comfyui·extensions