LLaMA-Factory的webui快速入门

一、webui的启动方式

LLaMA-Factory 支持通过 WebUI 零代码微调大语言模型。 在完成++++安装++++ 后,您可以通过以下指令进入 WebUI:

复制代码
llamafactory-cli webui

使用上面命令启动服务后,即可使用默认7860端口进行访问。访问地址:http://ip:7860,截止:2025年7月11日,页面结构如下:

二、开始训练前需设置的基本参数

在开始训练模型之前,您需要指定的参数有:

  • 模型名称、路径及模型下载源
  • 训练阶段
  • 微调方法
  • 训练数据集
  • 学习率、训练轮数等训练参数
  • 微调参数等其他参数
  • 输出目录及配置路径

在这里由于我选择了加速方式为unsloth 所以需要在llama-factory的虚拟环境中执行命令:

复制代码
pip install unsloth

截止当前我安装的包版本如下:

并且需要将计算类型选择"fp16" 否则会报错,报错信息如下:

packages/unsloth/kernels/fast_lora.py", line 259, in forward

Q = matmul_lora(X, QW, QW_quant, QA, QB, QS)

File "/usr/local/miniconda3/envs/llama-factory/lib/python3.10/site-packages/unsloth/kernels/utils.py", line 703, in matmul_lora

out = torch_matmul(X, W, out = out)

RuntimeError: expected mat1 and mat2 to have the same dtype, but got: c10::BFloat16 != c10::Half

参数设置如下:

三、开始训练

至此,即可点击开始进行模型训练。训练完成后,如下图所示:

后台日志窗口如下所示:

相关推荐
杭州泽沃电子科技有限公司17 小时前
在线监测:为医药精细化工奠定安全、合规与质量基石
运维·人工智能·物联网·安全·智能监测
GIS数据转换器17 小时前
GIS+大模型助力安全风险精细化管理
大数据·网络·人工智能·安全·无人机
OJAC11118 小时前
AI跨界潮:金融精英与应届生正涌入人工智能领域
人工智能·金融
机器之心18 小时前
Adam的稳+Muon的快?华为诺亚开源ROOT破解大模型训练「既要又要」的两难困境
人工智能·openai
带刺的坐椅18 小时前
Solon AI 开发学习4 - chat - 模型实例的构建和简单调用
java·ai·chatgpt·solon
楚国的小隐士18 小时前
Qwen是“源神”?实际上GLM-4.6才是被低估的黑马
ai·大模型·通义千问·智谱清言
可观测性用观测云18 小时前
观测云 MCP Server 接入和使用最佳实践
人工智能
掘金一周18 小时前
大部分人都错了!这才是chrome插件多脚本通信的正确姿势 | 掘金一周 11.27
前端·人工智能·后端
xier_ran18 小时前
深度学习:生成对抗网络(GAN)详解
人工智能·深度学习·机器学习·gan
ModestCoder_19 小时前
ROS Bag与导航数据集技术指南
开发语言·人工智能·自然语言处理·机器人·具身智能