大模型微调过程

环境配置

安装命令:

升级pip upgrade

复制代码
git clone --depth 1 https://github.com/hiyouga/LLaMA-Factory.git
cd LLaMA-Factory
pip install -e ".[torch,metrics]" -i 镜像源
或者
pip install llamafactory -i xxx

安装完毕后,输入命令 llamafactory-cli version,如下图示则安装成功!

启动LLaMaa-Factory

进行端口映射命令(可选)

由于阿里云平台的端口映射似乎存在问题,这会导致启动LLaMA Factory的Web界面显示异常,所以需要手动在命令行运行如下命令:

复制代码
export GRADIO_SERVER_PORT=7860 GRADIO_ROOT_PATH=/${JUPYTER_NAME}/proxy/7860/

说明:

  • 最新版本的魔搭社区,不需要进行端口映射命令。
  • 直接点击启动LLamaFactory之后命令行提示内容中的http://127.0.0.1:7860 会打开新开一个页面,打开类似https://1081840-proxy-7860.dsw-gateway-cn-hangzhou.data.aliyun.com/的地址。
  • 如果上述操作不起作用,可以尝试如下方式排查:更换浏览器、或者清楚浏览器历史记录和cookie...

输入命令

复制代码
llamafactory-cli webui

启动llama-factory的webui

此时,transformers版本为:

transformers 4.57.1

问题答疑

interface.py文件,要修改为True;

需不需要开放端口???7860

按照上述问题,下载文件并修改文件名,移动到对应路径下。

进一步,执行命令,增加权限

复制代码
chmod +x 路径/frpc_linux_amd64_v0.3

最终启动:

界面显示

相关推荐
CC数分几秒前
大模型时代的数据分析:AI会取代数据分析师吗?
人工智能·数据挖掘·数据分析
PHOSKEY4 分钟前
直面消费电子检测新挑战——光子精密3D工业相机折叠屏铰链检测应用方案
人工智能
guslegend13 分钟前
RAG系统的需求分析
人工智能·大模型
飞哥数智坊17 分钟前
AI编程教程多到爆炸,而我依然选择再做一套,而且完全免费
人工智能
liu****31 分钟前
LangChain-AI应用开发框架(二)
人工智能·python·langchain·大模型部署
科研实践课堂(小绿书)37 分钟前
COMSOL与AI融合的光子学智能设计
人工智能·comsol·逆向设计优化
羊小蜜.38 分钟前
Mysql 03: 连接查询全解——内连接、外连接与复合条件查询
数据库·mysql·算法·连接查询
追风哥哥43 分钟前
transformer 注意力机制解析
人工智能·深度学习·神经网络·机器学习·语言模型·chatgpt·transformer
海兰44 分钟前
【实战】Ubuntu 24.04下本地部署开源项目Higress
linux·人工智能·ubuntu·开源·银行系统