Stable Diffusion教程|SD WebUI必备插件安装 菜鸟轻松成高手

前言

一个刚学AI绘画的小菜鸟怎么快速成为Stable Diffusionde的高手?答案就是SD插件,只要学会使用SD的各种插件,帮你写正向和负向提示词,修复人脸/身体/手指,高清放大图片,指定人物pose,图片微调等等都可以轻松搞定,善用插件是成为高手必经之路。

目录

1 插件安装方法

2 基础插件介绍

3 高级插件介绍

一、插件安装方法

1 启动器上安装

setp1 打开绘世启动器,双击"A启动器.exe"

setp2 点击版本管理,点击内核,一键更新。

setp3 点击安装新扩展,搜索插件名词,回车。如:prompt

setp4 滚动找到,你需要安装的插件,点击"安装"按钮即可。如果已经安装过了展示"已装"。

setp5 如果搜索找不到你要的插件,也可以直接输入插件安装的URL地址,点击右侧的"安装"即可。

查阅、整理和输出教程属实不易,觉得这篇教程对你有所帮助的话,可以点击👇二维码领取资料😘

2、在线安装

如果你已经"一键启动"了webUI,也可以在webUI安装,只不过需要重新启动下才能生效。

Setp1 启动SD web UI, 一键启动,会自动打开浏览器。

Setp2 启动成功后,切换到"扩展"-"可用",点击"加载自:",右侧的地址本来就有,如果没有按下图输入即可。

Setp3 搜索插件名词回车,找到目标插件,点击安装即可。如:prompt

Setp4 搜不到插件,从网址安装即可。下面我会提供插件地址。

3、离线安装

不会科学上网的,网络有问题的,私信我"插件"给你百度网盘,你下载离线安装包,直接拷贝到指定目录,也可以进行安装。

目录:D:\Program Files\novelai-webui-aki-v3\extensions

(D:\Program Files 换成你电脑的安装路劲)

补充一个知识点,Web UI的这些文件夹分别干嘛?

  • embeddings:存放美术风格文件的目录,美术风格文件一般以.pt结尾,大小在几十K左右;

  • extensions:存放扩展插件的目录,我们下载的WebUI的插件就放在这个目录里,WebUI启动时会自动读取插件,插件目录都是git库,可以直接通过git更新;

  • extensions-builtin:存放WebUI内置的扩展;

  • models/hypernetworks:存放风格化文件的目录,风格化文件是配合Prompt使用的,以使AI会出对应风格的图片,风格化文件也以.pt结尾,大小在几百MB左右;

  • models/Lora:存放Lora的文件的目录,Lora文件是用来调整模型的,可以重映射模型文件的Prompt映射,使AI在相应的提示词下按照Lora的样式绘制,Lora文件一般以.safetensors结尾,大小在几百MB左右;

  • models/Stable-diffusion:存放模型的文件的目录,AI绘画时的采样基本从这个文件里采,影响图片的整体样式与画风,一般以.ckpt或.safetensors结尾,大小在几个G左右;

  • models/VAE:存放VAE文件的目录,VAE文件会影响图片整体的色调,如在刚开始玩WebUI时画出的图都比较灰,就是因为WebUI默认没有为我们设置VAE导致的,VAE文件一般以.ckpt或.vae.pt结尾,大小在几百MB或几个G不等;

  • outputs/extras-images:AI放大的原图的默认保存路径;

  • outputs/img2img-grids:批量图生图时的缩略图原图的默认保存路径;

  • outputs/img2img-images:图生图的原图的默认保存路径;

  • outputs/txt2img-grids:批量文生图时的缩略图原图的默认保存路径;

  • outputs/txt2img-images:文生图的原图的默认保存路径;

    这些路径我们是可以在WebUI的设置界面修改成自定义路径的。

  • scripts:存放第三方脚本的目录;

  • venv:这个文件夹是WebUI首次运行时配置运行环境自己创建的,出现运行环境的问题时,可以删掉它让WebUI重新生成。

4、勾选或取消插件后,需要"应用并重启"才能生效哦。

二、基础插件介绍

自带插件

在安装最新版@秋叶的SD webUI安装包,已经内置了必要的插件如下:

它们分别都是用来干嘛的??(东奔西跑查了很多资源)

LDSR图片放大算法)****

Latent Diffusion Super Resolution(潜在扩散超分辨率模型)的缩写。一种放大图片的算法,耗时最长,也是效果最好的,尤其擅长对照片写实图放大。

Lora(这里指小模型插件)

Low-Rank Adaptation of Large Language Models 低秩的适应大语言模型,上一篇咱们详细讲过,这里指已自带安装了这个插件,你可以下载很多lora模型,来使用。

ScuNET(图片放大算法

(Swin-Conv-UNet)是一种图像去噪深度学习网络,采用Swin-Conv块作为UNet骨干。ScuNET还采用了新的数据合成管线,用于实际图像去噪,包括高斯去噪和实际图像的盲去噪。

SwinIR (图片放大算法

是一种基于Swin Transformer的图像恢复方法,称为"Image Restoration Using Shifted Window Transformer"。SwinIR在图像超分辨率、图像去噪和JPEG压缩伪影减少等方面达到了最先进的性能。SwinIR包括三个部分:浅层特征提取、深层特征提取和高质量图像重建。特别是深层特征提取模块由几个残差Swin Transformer块组成。SwinIR通过实验展示了其在不同任务上的优越性能,参数数量可减少高达67%。

canvas-zoom-and-pan(局部重绘缩放平移图片插件)

这个扩展允许用户在图形界面上缩放和平移图像。可以在使用局部重绘、涂鸦重绘等功能时快捷的缩放图片大小,方便对图片区域进行精准的绘制.

extra-options-section(没搞懂在哪儿)

额外选项,这个扩展提供了额外的图像处理选项,允许用户定制特定的处理效果。与通用的设置菜单不同,它可能包括一些专门为高级用户设计的复杂选项。

hypertile(一种算法)

Tiled-optimizations for Stable-Diffusion稳定扩散的平铺优化,HyperTile 优化了 Stable-Diffusion U-Net 和 VAE 模型中的自注意力层,导致计算时间减少 1 到 4 倍,具体取决于初始分辨率和图块大小。实施过程非常简单。

mobile(手机)

我猜是适配手机访问webUI? 网上无资料暂不知道干嘛的。

prompt-bracket-checker

提示词括号语法检查器,"(()"左右括号不对称时,提示你的小玩意。

soft-inpainting(柔和重绘)

图生图涂抹重绘无缝处理的插件,允许您根据蒙版不透明度无缝地将原始内容与内涂内容混合。建议使用高蒙版模糊值!

三、高级插件介绍

1 简体中文翻译扩展

插件用途:翻译页面上的按钮为中文

插件地址:https://gitcode.net/ranting8323/stable-diffusion-webui-localization-zh_CN

2 ControlNet 插件

插件用途:SD最强插件之一,用于微调图片,里面有很多丰富的微调类型,如:canny、openpose、lineart 等等,你先安装后面我们详细逐一介绍和实战。

3 adetailer

插件用途:图片修复插件(包括:身体 脸 手),支持同时修复所有人的脸,所有人的手灯多个地方。里面包含很多算法,挨个使用的时候会自动下载安装,如果你网络不行请直接下载算法模型,放在文件夹里面".\novelai-webui-aki-v3\models\adetailer"

4 OneButtonPrompt

插件用途:新手找灵感,提示词都不用写,完全随机或指定风格生成提示词,一支点"生成"可以无限抽卡,懒人专用\(^o^)/~

5 Tag自动补全

插件用途:能在输入Tag时提供booru风格(如Danbooru)的TAG自动补全。因为有一些模型是基于这种TAG风格训练的(例如Waifu Diffusion),因此使用这些Tag能获得较为精确的效果。

6 sd-webui-prompt-all-in-one

插件用途:旨在提高提示词/反向提示词输入框的使用体验。它拥有更直观、强大的输入界面功能,它提供了自动翻译、历史记录和收藏等功能,它支持多种语言,满足不同用户的需求。非常好用,必装插件之一,有了5和6轻松写提示词无压力。

插件地址:https://gitcode.net/ranting8323/sd-webui-prompt-all-in-one

由于Stable Diffusion 是开源的,有很多开发者都为开源社区做了无私贡献,插件会越来越多,用法也不尽相同,笔者也会需要慢慢挖掘,探索新世界!

面部&手部修复插件:After Detailer

在我们出图的时候,最头疼的就是出的图哪有满意,就是手部经常崩坏。只要放到 ControlNet 里面再修复。

现在我们只需要在出图的时候启动 Adetailer 就可以很大程度上修复脸部和手部的崩坏问题

AI换脸插件:sd-webui-roop

换脸插件,只需要提供一张照片,就可以将一张脸替换到另一个人物上,这在娱乐和创作中非常受欢迎。

模型预设管理器:Model Preset Manager

这个插件可以轻松的创建、组织和共享模型预设。有了这个功能,就不再需要记住每个模型的最佳 cfg_scale、实现卡通或现实风格的特定触发词,或者为特定图像类型产生令人印象深刻的结果的设置!

现代主题:Lobe Theme

已经被赞爆的现代化 Web UI 主题。相比传统的 Web UI 体验性大大加强。

提示词自动补齐插件:Tag Complete

使用这个插件可以直接输入中文,调取对应的英文提示词。并且能够根据未写完的英文提示词提供补全选项,在键盘上按↓箭头选择,按 enter 键选中

提示词翻译插件:sd-webui-bilingual-localization

这个插件提供双语翻译功能,使得界面可以支持两种语言,对于双语用户来说是一个很有用的功能。

提示词库:sd-webui-oldsix-prompt

提供提示词功能,可能帮助用户更好地指导图像生成的方向。

上千个提示词,无需英文基础快速输入提示词,该词库还在不断更新。

以后再也不担心英文写出不卡住思路了!

由于篇幅原因,有需要完整版Stable Diffusion插件库的小伙伴,点击下方插件即可免费领取

相关推荐
火云洞红孩儿4 分钟前
基于AI IDE 打造快速化的游戏LUA脚本的生成系统
c++·人工智能·inscode·游戏引擎·lua·游戏开发·脚本系统
风清扬雨32 分钟前
【计算机视觉】超简单!傅里叶变换的经典案例
人工智能·计算机视觉
HuggingFace40 分钟前
自动评估基准 | 设计你的自动评估任务
人工智能·自动评估
GISer_Jing1 小时前
神经网络初学总结(一)
人工智能·深度学习·神经网络
szxinmai主板定制专家1 小时前
【国产NI替代】基于A7 FPGA+AI的16振动(16bits)终端PCIE数据采集板卡
人工智能·fpga开发
数据分析能量站2 小时前
神经网络-AlexNet
人工智能·深度学习·神经网络
Ven%2 小时前
如何修改pip全局缓存位置和全局安装包存放路径
人工智能·python·深度学习·缓存·自然语言处理·pip
szxinmai主板定制专家2 小时前
【NI国产替代】基于国产FPGA+全志T3的全国产16振动+2转速(24bits)高精度终端采集板卡
人工智能·fpga开发
YangJZ_ByteMaster2 小时前
EndtoEnd Object Detection with Transformers
人工智能·深度学习·目标检测·计算机视觉
Anlici2 小时前
模型训练与数据分析
人工智能·机器学习