【AI绘画Stable Diffusion】单人LoRA模型训练,打造你的专属模型,新手入门宝典请收藏!

大家好,我是灵魂画师向阳

本期我将教大家如何进行LoRA模型训练,打造你的专属模型,内容比较干,还请耐心看完!

随着AIGC的发展,许多传统工作岗位正逐渐被AI取代。同时,AI变革也在创造前所未有的新岗位和机会!而模型训练便是通往新天地的钥匙之一。

素材整理

为确保训练集的质量和多样性,素材尺寸与内容丰富度十分重要。本期教程以龙珠里的角色胖布欧为例。

  • 图片尺寸需要512*512(SD1.5原始训练样本尺寸)以上,契合尺寸可让训练效果更佳

  • 收集各个角度,各个场景、全身、半身、细节,甚至不同画风的胖布欧素材,以确保模型的泛化能力

  • 由于此次训练的概念比较简单,只需要20-30张高质量图片即可

图片处理

创建一个新文件夹以存放素材。建议使用全英文路径,并在文件夹名前加上"胖布欧"以便区分

  • 尽量将图片裁剪成512x512规格。若画面构图适合,裁剪可能会导致图片不完整,也可不作修改

  • 若图片有水印等干扰因素,可合理利用ps、美图等软件处理

  • 将图片移入文件夹

图片打标

自LoRA训练方式问世以来,市面上已经有许多集成LoRA训练器,也就是常说的"丹炉"。如老牌的kooyass,秋叶包,青龙包等,都可用于训练。

训练一个LoRA,显卡配置至少在6G以上。如果没有好显卡,可以使用云端服务器来进行训练,性价比非常高!

本期教程我们将采用秋叶丹炉来进行训练。 需要秋叶炼丹炉的小伙伴可看下方扫描获取哦

首先,我们需要选择一个基础模型,本教程选择Anything4.5,需要的小伙伴可以扫描获取

进入文件管理,把准备好的数据集上传到指定位置

打开丹炉,对图片进行标注和数据清洗。

打开WD1.4标签器输入图片所在的路径设置输出路径

并在提示词前加上"pangbuou ",将温度设置为0.35 。点击启动

可以看到我们的提示词会自动出现在文件管理的输出文件夹中。

接着回到丹炉,打开标签编辑器 ,对提示词进行清洗。输入数据集目录 ,点击加载

在右侧过滤栏删除与我们训练目标相符的特征词,比如"粉色皮肤"、"胖胖"等;

保留在画面中,且与训练目标特征无关的词,如"白色背景"、"漫画风格"等。

模型训练

点击LoRA训练-新手,新手建议保持默认数值,仅调整以下参数:

**(1)底模&VAE路径:**输入模型文件路径

(2)训练集路径:指向图片文件夹

**(3)LoRA名称:**为训练结果命名:Majin Buu

**(4)保存路径:**确定模型保存位置

**(5)epochs:**设置为20左右

**(6)batch_size:**提高可加快速度,根据显卡性能调整,如4090可设为8左右

**(7)dim:**对于小概念,设为32,alpha设为其一半,即16

设置完参数后,点击开始训练即可

同时,可以在我的应用-查看日志中查看训练进度

模型测试

训练完成后,我们可以对模型进行测试,看看模型的表现是否达到预期。

打开SD,使用webUI里的xyz脚本,x设置为模型epoch,y设置为模型权重

设置好底模和提示词等基础参数后,就可以跑上一轮来看看哪个才是你最心仪的结果啦!保存模型即可使用

LoRA应用场景之广不必多说,如在漫画领域生成分镜,游戏领域生成原画概念稿,换装,甚至制作模型,皆尚待探索。

写在最后

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。

若有侵权,请联系删除

相关推荐
爱吃的小肥羊3 小时前
我整理了 14 种 GPT-Image-2 的神仙玩法,大家看看效果怎么样!
aigc·openai
刘 大 望5 小时前
RAG相关技术介绍及Spring AI中使用--第三期
java·人工智能·后端·spring·机器学习·ai·aigc
阿杰学AI5 小时前
AI核心知识132—大语言模型之 AI for Science(简洁且通俗易懂版)
人工智能·ai·语言模型·自然语言处理·aigc·ai for science·ai4s
用户5191495848457 小时前
Windows Hypervisor 分区漏洞利用与 IOCTL 通信测试工具
人工智能·aigc
用户6757049885028 小时前
【AI开发实战】从想法到上线,我用AI全栈开发了一款记账微信小程序
后端·aigc·ai编程
用户6757049885028 小时前
全网都在推 Claude Code,但只有这篇文章教你如何“真正”能用
后端·aigc·claude
CoderJia程序员甲9 小时前
GitHub 热榜项目 - 日榜(2026-04-20)
ai·大模型·llm·github·ai教程
用户5191495848459 小时前
Automad 2.0.0-alpha.4 存储型跨站脚本(XSS)漏洞利用
人工智能·aigc
民乐团扒谱机10 小时前
基于ArkTS与端云协同的鸿蒙智慧校园助手——项目报告(AIGC预警⚠️)
华为·aigc·harmonyos
日光明媚10 小时前
DMD 一步扩散核心原理:从符号定义到梯度推导
人工智能·机器学习·计算机视觉·ai作画·stable diffusion·aigc