LLaMA-Factory的webui快速入门

一、webui的启动方式

LLaMA-Factory 支持通过 WebUI 零代码微调大语言模型。 在完成++++安装++++ 后,您可以通过以下指令进入 WebUI:

复制代码
llamafactory-cli webui

使用上面命令启动服务后,即可使用默认7860端口进行访问。访问地址:http://ip:7860,截止:2025年7月11日,页面结构如下:

二、开始训练前需设置的基本参数

在开始训练模型之前,您需要指定的参数有:

  • 模型名称、路径及模型下载源
  • 训练阶段
  • 微调方法
  • 训练数据集
  • 学习率、训练轮数等训练参数
  • 微调参数等其他参数
  • 输出目录及配置路径

在这里由于我选择了加速方式为unsloth 所以需要在llama-factory的虚拟环境中执行命令:

复制代码
pip install unsloth

截止当前我安装的包版本如下:

并且需要将计算类型选择"fp16" 否则会报错,报错信息如下:

packages/unsloth/kernels/fast_lora.py", line 259, in forward

Q = matmul_lora(X, QW, QW_quant, QA, QB, QS)

File "/usr/local/miniconda3/envs/llama-factory/lib/python3.10/site-packages/unsloth/kernels/utils.py", line 703, in matmul_lora

out = torch_matmul(X, W, out = out)

RuntimeError: expected mat1 and mat2 to have the same dtype, but got: c10::BFloat16 != c10::Half

参数设置如下:

三、开始训练

至此,即可点击开始进行模型训练。训练完成后,如下图所示:

后台日志窗口如下所示:

相关推荐
能力越小责任越小YA12 分钟前
服务器(Linux)新账户搭建Pytorch深度学习环境
人工智能·pytorch·深度学习·环境搭建
小五12729 分钟前
机器学习-线性回归
人工智能·机器学习
攻城狮7号41 分钟前
昆仑万维开源 Matrix-3D大模型,正在开启“造物主”模式
人工智能·matrix-3d·昆仑万维开源大模型
A7bert7771 小时前
【YOLOv5部署至RK3588】模型训练→转换RKNN→开发板部署
c++·人工智能·python·深度学习·yolo·目标检测·机器学习
闲不住的李先森1 小时前
AI 应用演进:从基础调用到自主智能体
人工智能·llm·aigc
数巨小码人1 小时前
AI+数据库:国内DBA职业发展与国产化转型实践
数据库·人工智能·ai·dba
黑客影儿2 小时前
使用UE5开发2.5D开放世界战略养成类游戏的硬件配置指南
开发语言·c++·人工智能·游戏·智能手机·ue5·游戏引擎
Coovally AI模型快速验证2 小时前
YOLOv8-SMOT:基于切片辅助训练与自适应运动关联的无人机视角小目标实时追踪框架
人工智能·深度学习·yolo·计算机视觉·目标跟踪·无人机
新智元2 小时前
刚刚,英伟达新模型上线!4B 推理狂飙 53 倍,全新注意力架构超越 Mamba 2
人工智能·openai
新智元2 小时前
北大数学家终结 50 年猜想!一只蝴蝶翅膀,竟难倒菲尔兹奖得主
人工智能·openai