书生·浦语 大模型(学习笔记-5)XTuner 微调 LLM:1.8B、多模态、Agent

目录

一:两种微调

二、数据的一生

三、微调方案

四、XTuner

[五、InternLM2 1.8B模型(相关知识)](#五、InternLM2 1.8B模型(相关知识))


一:两种微调

增量与训练和指令微调的区别

二、数据的一生

原始数据转换为标准格式数据

添加对话模板,直接调用即可,会拼接

三、微调方案

三种加载对比

四、XTuner

五、8GB 显存玩转 LLM

五、InternLM2 1.8B模型(相关知识)

适合初学者使用

六、多模态LLM

感觉原理和之前的增量与训练有些相似,具体还没总结出来哪里不太一样

学完感觉对大模型的理解更近一步

相关推荐
Nuanyt1 小时前
Agent 学习笔记(下篇三):上线工程、进阶选择与操作界面(Stage 7 / 7.5 / 8 + 延伸路线)
笔记·python·学习·memory·aiagent·harness
叼烟扛炮2 小时前
Linux 学习笔记(四十一):TCP 并发演进——从单进程到多线程服务器
linux·运维·服务器·网络·笔记·学习·tcp/ip
叼烟扛炮3 小时前
Linux 学习笔记(四十四):HTTP 协议解析与极简 Web 服务器实战
linux·服务器·学习
叼烟扛炮3 小时前
Linux 学习笔记(四十三):网络编程进阶——自定义协议解决 TCP 粘包与守护进程
linux·开发语言·网络·笔记·tcp/ip
songyuc3 小时前
【Manskill3】TableSceneBuilder学习笔记
pytorch·笔记·学习
外收内放4 小时前
Python基础语法练习题(75)
开发语言·python·学习
゛凌乱的记忆づ5 小时前
好用的md文件编辑器——TyporaS与Typora
笔记·git·typora·markdown
kyrie_sakura6 小时前
大模型学习20 大模型学习 - LangChain3 - Agents
人工智能·学习·langchain
zroooo6 小时前
计算机学习-知识庞大而繁杂
笔记·学习
坤坤子吖6 小时前
算法学习——单调队列
开发语言·c++·笔记·学习·算法