技术栈

p-tuning

小易老师AI实战
11 天前
lora·peft·prefix-tuning·全参微调·p-tuning·大模型微调·大模型面试
大模型微调:全参微调、PEFT系列方法核心区别(重点LoRA)做大模型落地、RAG之外的定制化能力开发,微调是绕不开的技术。面试中经常会问到:全参微调和PEFT的区别?LoRA对比Prefix-Tuning、P-Tuning优势在哪? 很多人只知道LoRA好用,但说不清底层差异、优缺点和推理侧代价。本文把主流微调方案统一整理,适合面试背诵+工程选型参考。
小Pawn爷
10 个月前
llm·p-tuning
10.不改模型只改提示P-Tuning微调新思路LSTM(Long Short-Term Memory长短期记忆网络 RNN循环神经网络的变体 )/MLP(多层感知机)
天狼啸月1990
2 年前
lora·llm·prompt·fine-tuning·prefix-tuning·p-tuning·prompt-tunning
LLM 研究方向(一): LLM Prompts--p-tuning、LoRA目录1. prompt-tuning background2. Prompt Tuning 模型介绍2.1 2021 prefix-tuning
Alex_StarSky
3 年前
chatgpt·llm·chatglm2·私有数据·p-tuning·微调训练·本地化训练
GPT实战系列-P-Tuning本地化训练ChatGLM2等LLM模型,到底做了什么?(一)本文试图分析程序结构和代码,解释序列转换生成模型的微调训练。为了篇幅不要过长,下期解读训练代码。 GPT实战系列-P-Tuning本地化训练ChatGLM2等LLM模型,训练代码解读?(二)
我是有底线的