从零开始学AI绘画,万字Stable Diffusion终极教程(三)

【第3期】Lora模型

欢迎来到SD的终极教程,这是我们的第三节课

这套课程分为六节课,会系统性的介绍sd的全部功能,让你打下坚实牢靠的基础

1.SD入门

2.关键词

3.Lora模型

4.图生图

5.controlnet

6.知识补充

在SD里面,有一个模型叫Lora模型

绝大多数有意思的图,都需要用到Lora模型来生成

这一节课,我们就来看看Lora有什么用,以及该怎么用

目录

一、Lora有什么用

二、下载Lora

三、使用Lora

四、随机数种子

五、结尾


一、Lora有什么用

这是我用AI绘画生成出来的美女照片

这是AI美女穿上了我指定的衣服的照片

不管是穿汉服还是穿JK都可以

更好玩的是,通过AI绘画,可以直接生成各种游戏或者动漫的真人coser

以上这些照片都是用了Stable Diffusion的Lora模型生成的

简单来说,Lora可以固定我们照片的特征

固定人物特征,可以让我们生成好看的小姐姐,统一角色形象

固定物品特征,可以让小姐姐穿上特定的衣服

还有固定照片风格,可以生成特定风格的插画

我会详细介绍关于lora的知识,让你看完这篇文章,就能生成出来自己的专属模特

二、下载Lora

Lora是需要自己去下载的模型

我在网盘里面给大家分享了一些比较常用,而且比较好看的Lora,有需要的朋友可以自己去保存

除此之外,我们还可以自己去模型网站下载

其中最出名的模型网站就是C站,里面的模型非常多

但是这个网站需要科学上网,大家只能自己想想办法了

现在国内也有很多模型网站,大家也可以去找找看

https://civitai.com/models

接下来我们看看怎么在C站下载Lora模型

打开C站,点击右上角的小图标,点击"Lora",就可以把Lora模型筛选出来

找到自己喜欢的Lora点进去,点击右边的"Download"就可以下载模型

这些下载的模型需要放到特定的文件夹里面

在SD文件夹里面找到models文件夹,把Lora模型放到Lora文件夹里就可以了

除了用网站上别人的Lora,我们还可以自己炼制Lora

三、使用Lora

下载好了lora模型之后,我们就来看看lora怎么用

打开sd,点击lora,这里面就是我们下载保存到电脑的Lora模型

如果这里没有加载出来,点一下这个刷新按钮就行了

直接点击我们要用的Lora,关键词的文本框里面就会自动添加一串英文

前半部分是这个lora的名字,后面的数字1是权重

lora的权重一般设置在0~1之间,因为权重大于1,出来的照片可能会变得奇奇怪怪

Lora是可以叠加使用的,像这张照片就用了三个Lora

只是要注意,和关键词一样,lora之间也要用英文状态下的逗号分隔开

另外,每个Lora设置的权重不一样,出来的照片都会不一样

想要生成一个好看的小姐姐,可以多去试试不同的权重组合

关于Lora还有一个需要注意的点,那就是我们在网站上下载Lora的时候,要顺带看一下这个Lora有没有触发词

触发词的意思是,我们在使用某个Lora的时候,在关键词里必须输入某个词语,这样Lora才会起作用

比如这个JK制服的Lora,它有两个触发词

如果我们用了Lora却没加上触发词

出来的照片是这样的,Lora完全不发挥作用

当我们关键词里面加上这两个触发词之后,生成出来的照片是这样的,这时候Lora才起作用了

为了之后我们每一次更加方便的调用Lora,我们可以把触发词和推荐权重直接保存在SD里面

把鼠标放在Lora上,然后点击右上角的小图标

这时候会弹出来这样一个窗口

我们就可以把触发词和推荐权重记在这里

比如这个洛丽塔裙子的Lora,它的触发词是"lo dress",作者推荐的权重是0.7

那我们就可以回到SD,把这个信息记录下来,然后点击"保存"

这时候我们直接点这个lora,关键词的文本框里就会自动加载触发词和调整lora权重

这样设置了就非常方便,哪怕很久没用这个lora,也不会忘记它的触发词

四、随机数种子

为什么有时候我们跟别人用的大模型、关键词、Lora还有其他参数都一样

可生成出来的图就是不一样呢

那是因为还有一个因素影响着照片------就是"随机数种子"

AI绘画是在这么一张全是噪点的图片上不断迭代,最后生成出来一张照片的

而不同的随机数种子,就代表着不同的噪点图

哪怕所有设置以及关键词都一样,不同的噪点图生成出来的图片就不一样

所以,只有当大模型、关键词、参数以及随机数种子都一样的时候,我们才能生成和别人差不多一样的照片

但因为电脑配置的差别,也会导致照片有细微的不同

在我们生成的照片下面,有一大串英文,这是照片的生成信息,seed值就是我们这张照片的随机数种子

点击随机数种子这个绿色图标,这个seed值就会加载上来

这时候我们点击生成,就会用这个随机数种子的噪点图作为底图重新生成照片

点击这个骰子就会变成-1

当随机数种子为"-1"的时候,代表着每一次生成照片都会给一个随机的数值

这也是为什么 我们每次点生成都能出来不同照片的原因

五、结尾

通过加不同的Lora,或者是多个Lora不同权重的叠加

我们就可以生成出来非常多有意思的图片

但是建议新手一张照片不要用太多的Lora

Lora之间可能会相互影响,导致生成出来的照片崩坏了

而且照片出现问题,我们也不知道是哪个Lora的问题

以上就是关于Lora的全部内容

相关推荐
码农杂谈000710 分钟前
不止三折叠:网易智企 IM UIKit 鸿蒙版一键升级多形态适配
人工智能
泯泷25 分钟前
别再手动盯盘了!用这个免费工具实现股市自动监控
人工智能
陈如水35 分钟前
Spring AI Alibaba 在多 Agent 场景下的实践
java·人工智能·spring
瓶瓶持续学习中1 小时前
物理AI与具身智能的技术架构区别:从空间建模到机器人动作执行
人工智能·机器人
羲云网络1 小时前
GPT Image 2.6 精准编辑前,先排查参考图的访问权限与输入交接
图像处理·人工智能·aigc
snakeshe10101 小时前
ChatGLM行业垂直领域微调实战:从需求分析到数据集加载完整流程
人工智能
智联视频超融合平台5 小时前
视频 AI 的误报之战,正在从调参数卷到改架构
人工智能·大模型·边缘计算·视频监控·安防
水如烟6 小时前
孤能子视角:智能的边界不在算法强弱,在可形式化性——从概率法到因果推理,选择池的边界一直在那里
人工智能
万里侯7 小时前
日志聚类之后别把 noise 扔掉:降噪应该改变视图,不抹掉证据
人工智能·微服务·ai·容器·k8s