IP-Adapter学习

参考:https://baijiahao.baidu.com/s?id=1803373544569190578\&wfr=spider\&for=pc

IP-Adapter 是 SD中比较重要的controlnet,由腾讯公司出品。主要原理:提取图像特征,并嵌入预训练文本,最终加入到扩散图像中。简单理解,提取图像的特征:构图特征、面部特征,根据权重参数与原prompt进行融合,共同作用到扩散图像上。

以下面这张图举例:

从条件图中提取特征,包括前景、背景结构,任务特征等。

简单案例:https://blog.csdn.net/qq_41314882/article/details/140517620

其中也有讲述InstanID的内容,结论:在面部处理上InstantID 优于 IP-Adapter

相关文档:https://baijiahao.baidu.com/s?id=1806079149555811709\&wfr=spider\&for=pc

相关推荐
Mr数据杨2 天前
【ComfyUI】深度 ControlNet 深度信息引导生成
comfyui
Mr数据杨3 天前
【ComfyUI】SDXL Turbo一步完成高速高效的图像生成
comfyui
Mr数据杨4 天前
【ComfyUI】图像描述词润色总结
comfyui
q_q王22 天前
ComfyUI工作流不动了?
大模型·comfyui·工作流
雨稚2 个月前
comfyUI-ControlNet-姿势控制&深度控制
sd·comfyui·contrlnet
这是一个懒人3 个月前
SD和comfyui常用模型介绍和下载
stable diffusion·comfyui·模型下载
一刀到底2113 个月前
comfyui利用 SkyReels-V2直接生成长视频本地部署问题总结 2 :寻找丢失的model 和工作流中 get set 方法的应用
人工智能·python·comfyui
一刀到底2113 个月前
comfyui 工作流中 视频长度和哪些参数有关? 生成15秒的视频,再加上RTX4060 8G显卡,尝试一下
人工智能·python·comfyui
浪淘沙jkp3 个月前
AI大模型学习三十、ubuntu安装comfyui,安装插件,修改返回405 bug,值得一看喔
人工智能·学习·ubuntu·comfyui·dify
一刀到底2113 个月前
ComfyUI 文生图,绘图要求中 正向提示词、负向提示词 有什么区别,webp又是什么格式 comfyui 那么喜欢它
人工智能·python·comfyui