5-27 临摹大师-IP-Adapter

前言:

前一节我们主要介绍ControlNet中如何对黑白照片进行上色

主要介绍ControlNet中的IP-Adapter。这个也是一种类似的风格借鉴,类似Reference的能力。

当然IP-Adapter有两点或许可以吸引我们,一个是国人腾讯公司制作的。另一个在速度和效果方面更加快,更加细化。所以学习和掌握下也是个不错的选择。

知识点:

  1. IP-Adapter

IP-Adapter 是腾讯的另一个实验室 Tencent AI Lab 研发的控图模型。名称中的 IP 指的是 Image Prompt 图像提示,它和 T2I-Adapter 一样是一款小型模型,但是主要用来提升文生图模型的图像提示能力。

IP-Adapter 自 9 月 8 日发布后收到广泛好评,因为它在使用图生图作为参考时,对画面内容的还原十分惊艳,效果类似 Midjourney 的 V 按钮。它也同样内置了多种控图模型,下图中是官方提供的绘图案例。

跳转中...

之前不是也有一个reference吗,到底有什么区别?

IP Adapter比reference的效果要好,而且会快很多,适配于各种stable diffusion模型,还能和controlnet一起用。

模型下载位置

https://huggingface.co/h94/IP-Adapter/tree/main

下载对应的文件,然后存放到extensions\sd-webui-controlnet\models 目录下即可。

处理过后,你觉得有什么变化吗? 气质上貌似叠加了。。。

叠加之后, 这个人脸的角度也相似了吧。。。

RA/SD 衍生者AI训练营

相关推荐
美狐美颜SDK开放平台4 小时前
多终端适配下的人脸美型方案:美颜SDK工程开发实践分享
人工智能·音视频·美颜sdk·直播美颜sdk·视频美颜sdk
哈__4 小时前
CANN加速Image Captioning图像描述生成:视觉特征提取与文本生成优化
人工智能
禁默4 小时前
Ops-Transformer深入:CANN生态Transformer专用算子库赋能多模态生成效率跃迁
人工智能·深度学习·transformer·cann
杜子不疼.4 小时前
基于CANN GE图引擎的深度学习模型编译与优化技术
人工智能·深度学习
L、2184 小时前
深入理解CANN:面向AI加速的异构计算架构详解
人工智能·架构
chaser&upper4 小时前
预见未来:在 AtomGit 解码 CANN ops-nn 的投机采样加速
人工智能·深度学习·神经网络
松☆4 小时前
CANN与大模型推理:在边缘端高效运行7B参数语言模型的实践指南
人工智能·算法·语言模型
结局无敌5 小时前
深度探究cann仓库下的infra:AI计算的底层基础设施底座
人工智能
m0_466525295 小时前
绿盟科技风云卫AI安全能力平台成果重磅发布
大数据·数据库·人工智能·安全
慢半拍iii5 小时前
从零搭建CNN:如何高效调用ops-nn算子库
人工智能·神经网络·ai·cnn·cann