LLaMA-Factory的webui快速入门

一、webui的启动方式

LLaMA-Factory 支持通过 WebUI 零代码微调大语言模型。 在完成++++安装++++ 后,您可以通过以下指令进入 WebUI:

复制代码
llamafactory-cli webui

使用上面命令启动服务后,即可使用默认7860端口进行访问。访问地址:http://ip:7860,截止:2025年7月11日,页面结构如下:

二、开始训练前需设置的基本参数

在开始训练模型之前,您需要指定的参数有:

  • 模型名称、路径及模型下载源
  • 训练阶段
  • 微调方法
  • 训练数据集
  • 学习率、训练轮数等训练参数
  • 微调参数等其他参数
  • 输出目录及配置路径

在这里由于我选择了加速方式为unsloth 所以需要在llama-factory的虚拟环境中执行命令:

复制代码
pip install unsloth

截止当前我安装的包版本如下:

并且需要将计算类型选择"fp16" 否则会报错,报错信息如下:

packages/unsloth/kernels/fast_lora.py", line 259, in forward

Q = matmul_lora(X, QW, QW_quant, QA, QB, QS)

File "/usr/local/miniconda3/envs/llama-factory/lib/python3.10/site-packages/unsloth/kernels/utils.py", line 703, in matmul_lora

out = torch_matmul(X, W, out = out)

RuntimeError: expected mat1 and mat2 to have the same dtype, but got: c10::BFloat16 != c10::Half

参数设置如下:

三、开始训练

至此,即可点击开始进行模型训练。训练完成后,如下图所示:

后台日志窗口如下所示:

相关推荐
图特摩斯科技1 小时前
AI自动构建本体?安排! Harness+OntoFlow让本体开发像搭积木一样简单
人工智能·知识图谱·abutiongraph·本体论·palantir·ontology
imbackneverdie1 小时前
多AI模型协同完成一篇论文是什么效果?
人工智能·自然语言处理·aigc·科研·ai写作·论文写作·ai工具
xUxIAOrUIII1 小时前
Dive into Claude Code 系列文章 - Part One
人工智能·ai·typescript
义嘉泰1 小时前
一颗 NAND Flash 的自我修养
前端·人工智能·芯片
小宋10211 小时前
Tycoon AI 新手快速上手指南
java·大数据·人工智能
lizhihai_991 小时前
股市学习心得-PCB材料、制造、设备与耗材
大数据·人工智能·制造
吴佳浩1 小时前
现代多模态大模型的核心基础:Unified Self-Attention
人工智能·算法·llm
zuozewei1 小时前
AI-7D-SATS 开发笔记 04:为什么要做一个面向性能分析的 Agent?
人工智能·笔记
码农阿强1 小时前
GPT-Image、Gemini-Image、Grok-Imagine 技术对比与API接入实战分享
人工智能·gpt·ai·aigc