LLaMA-Factory的webui快速入门

一、webui的启动方式

LLaMA-Factory 支持通过 WebUI 零代码微调大语言模型。 在完成++++安装++++ 后,您可以通过以下指令进入 WebUI:

复制代码
llamafactory-cli webui

使用上面命令启动服务后,即可使用默认7860端口进行访问。访问地址:http://ip:7860,截止:2025年7月11日,页面结构如下:

二、开始训练前需设置的基本参数

在开始训练模型之前,您需要指定的参数有:

  • 模型名称、路径及模型下载源
  • 训练阶段
  • 微调方法
  • 训练数据集
  • 学习率、训练轮数等训练参数
  • 微调参数等其他参数
  • 输出目录及配置路径

在这里由于我选择了加速方式为unsloth 所以需要在llama-factory的虚拟环境中执行命令:

复制代码
pip install unsloth

截止当前我安装的包版本如下:

并且需要将计算类型选择"fp16" 否则会报错,报错信息如下:

packages/unsloth/kernels/fast_lora.py", line 259, in forward

Q = matmul_lora(X, QW, QW_quant, QA, QB, QS)

File "/usr/local/miniconda3/envs/llama-factory/lib/python3.10/site-packages/unsloth/kernels/utils.py", line 703, in matmul_lora

out = torch_matmul(X, W, out = out)

RuntimeError: expected mat1 and mat2 to have the same dtype, but got: c10::BFloat16 != c10::Half

参数设置如下:

三、开始训练

至此,即可点击开始进行模型训练。训练完成后,如下图所示:

后台日志窗口如下所示:

相关推荐
不良人龍木木1 天前
机器学习-常用库
人工智能·机器学习
罗橙7号1 天前
【pyTorch】关于PyTorch的高级索引机制理解
人工智能·pytorch·python
rengang661 天前
09-随机森林:介绍集成学习中通过多决策树提升性能的算法
人工智能·算法·随机森林·机器学习·集成学习
zskj_qcxjqr1 天前
数字大健康浪潮下:智能设备重构人力生态,传统技艺如何新生?
大数据·人工智能·科技·机器人
动能小子ohhh1 天前
AI智能体(Agent)大模型入门【9】--如何在pycharm等其他编译软件调用ocr工具【只写后端代码不演示】
人工智能·python·深度学习·机器学习·pycharm·ocr
mit6.8241 天前
[Tongyi] 工具集成 | run_react_infer
人工智能·深度学习·算法
无锡布里渊1 天前
分布式光纤声波振动传感:守护智慧城市燃气管网安全的 “神经末梢”
人工智能·安全·智慧城市
过往入尘土1 天前
Linux:虚拟世界的大门
linux·人工智能
菜鸟‍1 天前
【论文学习】2025年图像处理顶会论文
图像处理·人工智能·学习
飞哥数智坊1 天前
“成章”开源首更:3大体验优化,合集管理补齐!
人工智能·开源·ai编程